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Cours de S TAT 1ST IQUES1 


1 Rap p els su r la toT ie d e la mesu re 

I nt ro duct ion 

II demeur e des cho ses inco nnues 'a pa r tir des co nrrar ieiseesceB pmdTba&ilit' 

- Q u’es t- ce qu'awahement et I'ens emble de tcxBEtesme nts? 

- Q ue se pa sse-tplo ur des pr o baeteliMxenements mo ins cla ss iques (pa r exemple Tens emble des 
de c ima ux )? 

- Co mment tr a iter une va r ieablte a le qui est co ntinue titdisaila fo is (pa r exemple le no mbr e de 
minutes paesas'deva nt la TV)? 

1.1 Mesur es 

1 . 1.1 Tri bus 

N o tati on. - Q est un en semble (fi ni ou in fin i). 

- P (Q) est Ten semble de t ou s les sou s- en sembles (part ies) de Q. 

Rapp el. Soit E un en sembldE est dit den ombrable s&k iste une biject ion ent re ENetou u n sou s- 
ensemble de IN . Par ex emple, un ensemble fini, ZXZErdcgan t elri ombrables. En revan che, IR n'est 
pas <£n om brable. 

De fini ti o rSoit une famil le de part ies de Q (doln<s=P (Q)). On dit queF es t u n esiJge si: 

-Q <=F ; 

- lors qu e/£F alor s (0 A) GF ; 

- pour tou tnGIN*, lors qu e (A" ,A n ) GF n alor sA. u ■■ -u A n GF . 

De fini ti o tSoit une famil fede part ies de Q (dofaeP (Q)). On dit qud\ es t u n e t ribu ( ouetor-e^ilg' 
s u r 0 s i: 

-Q <=F ; 

- lors qu e?EF alor s (0 A) GF ; 

- pou rl c IN , lors qu aXAi GF 1 alors ia Ai GA. 

E xe m pi e. - Cas duPile ouFace. 

- Cas o'uQ est in fin i : Q = IN par ex emple. 

Pro priete. Avec les not at ionecpden t es: 

1. 0GA ; 

2. si A et B son t dans la t ri&u alor sAn B est dansA ; 

3. si Ai etA 2 sont deu x t ribu s su r QAeiiI<bii &2 est un e t ribu su r 0 . Pfeinerajlemen t, poucrllN, 

s i(Aj )ia en semble de t ribu s su r 0, es t u n e t ribu surfi; 

4. si Ai et A 2 sont deu x t ribu s su r Q, Alot^ 2 n’es t pas f®rcnen t un e t ribu su r Q. Par ex emple, 

s i Q= {0 , 1.ET 1 = {0{O}, {1,2},Q} etT 2 = {0{O,1>, {2},Q}. 

De fini ti 0 rSi E est une famil le de parties de Q (d6ncP (Q)), alors on appel le tribu engetedpar 
E, notee of), la t ribu en geeeipar Tint ersect ion de t ou t es les t ribu strata $raant fa ire laerrie 
chos e avec desetohgp's ). 

Rem arqu ia t ribu engenedrest la "plus petite" tribu (au sens de I’inclusion) contenant Ifi.famil le 

Rapp el. - Un en semble ou vert U dan s un espatraqione X est tel le que pour tou©<U, il ex iste 
r > 0 telque B(x, r)<= U. 

- On dit qu 'u n en semble dan s un eepaicpjrBX est farni son comephen t aire dan s X est ou vert. 
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De fini ti o r£ oit Q u n es pacB±mra|ue. On appel le tribueltien'ne su r Q, bs) 0(Q), la t ribu en geaedr' 
par les ou vert s de Q. Un en semB(©des t appa&orelien. 

E xe m pi e. -Bor'eliens su r IR, su r ]0 , 1 [. At tu^tjiiaip x - ^5; x+ ^ GB(]0 , 1[) car u reeirriion 
qu elcon qu e d’ou verts est ou verte. 

-Bor'elien s su r^R 

1 . 1 .2E s p ace m e s urab le 

De fini ti 0 rS oit Q un en semble et Aoiiin e t ribu su r Q. On dit qu AX©St u n espace m es u rable. 

Co ro I I ai r$u an d on s'ertess era au x probebjlctn dira qu e (Ai) est u n espace probabilis able. 

Pro priete. Si (Qi,Ai)i son t n espaces mesu rabies, alors un eralearablfeaire de Q fQ- ■ x Q n est 
u neeu n ion fin ie d'en sembtesA-x A n 0 'u chaquidlAi. L’en semble des en serefe'teiscih t aires est 
u ne afejire et on notfei ® ■■ ■ ®An (on ditAi t en soriAb ... t en soriAIn) la t ribu su r Q en geeqta'r 
ces en semb&sm en t aires. 

E xe m pi Slaves de 1$. 

De fini ti 0 tOn appel le espace mesurable produitjcflei^rtes pace m esu rableQi, Ai . 

i=l i=l 

E xe m pi Slile / Face 2 fois. 

1 . 1 ,3De fini ti ons et Proprate s d’ une m es u re 

De fini ti 0 rS oit (QA) un espace mesu rable. L'applicat i$mp:[0 ,+0 ] est u n e mes u re si: 

= 0 . 

-Pourtoutl c IN et pou r (A)iei famil le disjointe dte (tel le queA u Aj = 0pou r i = j ), alors 
p Ai = p(Ai) ( propete dit e de a -addifejvit' 

i€l i€l 

De fini ti 0 tAvec les not at ionecpden t es: 

- S i p(Q ) <-H» , on dit qu e p est fin ie. 

- S i p(Q ) < M avec M <-f» , on dit qu e p est bem ' 

- Si p(Q) = 1, on dit qu e p est un e mesu re de praibabilit' 

E xe m pi £as de Q = IR, de IN , ou 2 IR 

De fini ti 0 rSi (Q,A) est u n espace m es u rable (jradqcabilis able) alors ^Q,p) est u n es pace moss u r' 
(res p. probabeliqu an d p est un e prote^bilit' 

Rem arqu & u r (CA), on peu teJi'n ir un e in 6nd& mes u res. 

Pro priete. S oit (QA, p) u n espace m eetu( Ai )i<= in, une famil le dte. 

1. SiA x c A 2 , alor s p(A) < p(A 2 ). 

2. Si p(Ai) <+ 00 et p(Ac) <+ » , alor s p(A u A 2 ) + p(Ai n A 2 ) = p(Ai) + p(Ae). 

3. Pou rtoutl <= IN , on ap Ai < p(Ai). 

i€l iGl 

4. SiA i <= Ai+i pou r tou 1EIN (su it e croissan te en sen s de I'in clu sion ),r^l)(aeir(pfeA un e su ite 
croissante convergente tel le que 

p Ai =ljm M p(Ai) (meme si cet te limit e e®t>f 

i€ IN 

5. Si Ai+i <= Ai pou r tout G IN (su it eatroissan te en sen s de I’in clu siqjr(A<3t<+ 00 , alors 

(p (A ))ne in est un e su iteeraMssante convergente tel le quepAi =l.im p(Ai ). 

ie in l_> 
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E xe m pi e. 1. S oit (QA, p) u n espace m esQmrcfeTi n it v (A) = pfAB) o'uBGA.vmesu re? 

2. Sip i etp 2 mes u res su rAQp i +M 2 et ap sont-el les des mesures? 

De fini ti o r£ oit (QA, p)un espace m eetu(Ai )ie in une famil le cfe. 

1. On dsfi n it lim sup,0A = A m (in tu it ivemen t, lim $,Up^At Ten semble de§<£5 tels que 

n€ IN man 

w appart ien ne 'a un eeidtfifo 

2. On definit lim inf (nP) n = A m (intuitivement, lim infnOA est Pen semble deft© tels que 

nS IN man 

w appart ien ne 'a t ou is te&Af 'a un n ombre fini d'ent re eu x ). 

E xe m pi £as des su it es croissan t esrolisian t es d'en sembles. 

Th e off'm e (Tfe beirrie d’ex tens io n de Ha hn - Ca ra th&b QoeEtydn en sembfe,un e ateJ3re su r Q, 

et v u ne applicat iorf ddans [0 ,** ] additive (tel le que w BA = v> (A) + v (B ) pourtAB= <Z) , alor s si 

A est la t ribu en g®eqbra'rF , il ex iste un e mesu re v su r la^\t qUoti ao cide avec v s6r(c'es b-'dire 
que pour tou tEF , v (F ) = v (F )). On dit que v prolonge v sur la Mbu 

E xe m pi ®efin it ion de la mesu re de Lebesgu e s'U.r.lR , IR 
De fini ti o rS oit (QA, p)un espace m es u r' 

1. Pou rA EA, on dit qu e A est pagligeable si p(A) = 0. 

2. Soit une propsta P depen darateselemen ts w de ODn dit queP est vraie p- presqu e partp>ut 
presqu es“u remen t su r un espacs^sobebBstible des w pour laquel le el le n'esti^e^sf 
p - egligeable. 

E xe m pi e. - Mesu re de Lebesgu e su r ftll.ouQ 

- La proprefe' " la su it e de fonct kfixlj =x n con verge vers la fon ct ion f (x) = 0" est vraie A- presque 
part ou t su r [0 , 1 ]. 

- Soit (IR, B(IR), p) et soit F la fonctionefli'n ie par F (x) = p($ ,x]) pourx GIR. 

1 . 1.4 Foncti o ns mes urabl es 

Rapp el. Soitf :E ->F,o'uEetFsont2 espaeis-inpu es. 

- Pou rl cF,on appel le ensemlekaproqu e de I par f , Ten semtH@f)= {x EE, f(x) El }. 

- (f cont in u e£=> (pou r t ou t ou vert U de F aloHlfl ) est un ouvert de E ). 

De fini ti o r£oit f :E -» F et soit I u ne t ribu su r F . On n of @f) I’en semble de sou s- en sembles deQ 
telqu er 1 (l )= {f _1 (l ),l El} . 

Pro priete. Soit (Q, A ) u n espace m es u rable et soifclDQAIor sf _1 (A) es t u n e t ribu su r Oes^pel' 
t ribu engersfr par f. 

De fini ti o rS oit (QA) et (Q ,A ) deu x espaces mesu ralbtasfonct ion f:Q -* Q est dit e mesu rable 
pour les t ribAsetA' si et seu lemen t“^i(fA ) cA (don c si et seu lemeWt £EA , alor sf _1 (A ) EA). 

E xe m pi e. - Fonct ion indicat rice. 

- Combin aison leaire de fon ct ion s in dicat rices. 

Rem arqu ©an s le cas o 'lAOQ^st u n espace probabilis able, et sMIRQalors si f est un e fon ct ion 
mesu rable sAretB(IR), alors f es t u n e variabfeelablre. 

E xe m pi &l ombre de Piles dan s un jeu de Pile/Face. 

Rem arqu ©an s le cas o 'uAPest u n espace m es u rable, et s^f(£E, B(Q )), o'uQ es t u n es pace 
metriqu e fi(Q ) Pen semble desdiistn s deQsi f est un e fon ct ion mesu rab4ee±ififQ ), alors f est 
dit e fonct ion bben n e. 

Prop os i ti onS oit (QA) et (Q , A ) deu x espaces mesu rabies Qt4: Q . Soit F une famil le de sous- 
en sembles deffel le que &0= A . Alors 
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1. f 1 (F ) en gendre la t ribiifA). 

2. ( f m es u rak*te> (f _1 (F ) cA ) 

C o ne qu e n ce. -Si (Q,A) et (Q, A) son t deu x espaces mesu rabfefeieitosplors t ou te applicat ion 
cont in ue de@ Q est mes u rable. 

- Pou r mont rer qu 'u ne fonction4:£R est mes u rabls,uilffit de montrer que la famil le d'ensemble 
({wGQ, f (w)<a}) aGIR EA. 

Pro priete. - Soit f mesurable de (£A) dan s (QA ) et g m es u rable dp^QJdan s (QA"). Alors 
gof est mesu rable dataset A . 

- Soitf i mes u rable deAQ,dan s (Q, Ai) etf 2 mes u rable de$5,dan s (Q,A 2 ). Alor s h: Q -> 

Qi x Q 2 tel le que h(w ) =i(06 ),fc(w )) est mesurable dAnet Ai ®A 2 . 

-Soit (fn)neiN une su it e de fonct iomises u rabdtes(Q,A) dans(Q , B(Q )), o'uQ est unes pace 
met riqu tel le qu'fex ist e un e fon ct ion f limit e simpleMddfic Vw E Q, Jjm f n (w ) = f (w )). 

Alors f est mesu rable daAnsetB(Q). 

Defini ti on. S oit f mesu rable dA,(P) dan s ([A ) et soitp : A -* [0 ,4*° ] tel le que pour tou©A , 
on aitpf (A ) = p(f _1 (A )). Alor spr est u n e mes u re spA JQppeie mesu re im age de p par f. 

Cas parti cul ie rS i p est u n e mes u re de peatfabiiDtes tune variabteffllire alors<pest la mes u re 
(loi) de probabititde la var iableaat'oire X. 

1 . 1.5 Cas des foncti 0 nse el I es m es u rabl es 

Pro priete. Soit f et g deu x fonct ioBElrles mesurables (de^CQji) dans (IRB(IR)))- Alors a.f , f + g, 
min(f , g) et max(f , g) sont des fonctsalsles mesurables. 

Pro priete. Soit (f n )ne in une su it e de fonct ieefcles mesurables. Alors k)fe(tf sup(f,) son t des fon c- 
tions eel les mesurables. 

De fini ti 0 rSoit f :Q -» IR. Alors f est dit ©t age' s’ilexiste une famil le d’ensembles disjoints Uh 
de Q et une famil le ctehs' (q()i< i<n tel les que pour tou&!D, on ait f (w )= oq Mai (w ). 

i=i 

Rem arqu &i lesAi sont t ou s datast ribu su r Q, alors f eAt- m es u rable. 

The oe'Yn eTou te fonct ioearfle mesurable 'a valeurs dan® ][§st- limit e simple d'u ne su it e croissan te 
de fonct ioneSt' age's. 

C 0 ne'qu e n cfe.oit f une fonct ioieel'le mesurable. Alors f est limite simple de fonetiagss'. 

1.2 Integration de Leb esgue 

Da ns to ute la suite, on c®nrsjd(iA„ p) un espa ce mss ur' 

1 . 2.1 Int'e g ral e de Leb es gue d' une foncti on p os i ti ve 
De fini ti 0 n. 1. Soit f = ll a , o' uAGA . Alor s: 


fdp= f (w )dp(w ) = p(A). 

2. Soit f = lla, o' uAGA et soitB EA . Alor s: 

f dp= f (w )dp(w )= Mb p(A)(u )f (w )dp(w ) = pt>B). 


3. S oit f une fonct ioet' age' positive tel le que f= a\ IIa, , o' u lesA EA eta i > 0 et soitB EA . 


Alor s: 


f dp= f (w )dp(w )= Mb (w )f (w )dp(w )= ai p(Ai n B). 
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E xe m pi ^onct ion^l, fon ct ion s en escalier,... 

De fini ti o i£ oit f une fonct iafcv mesu rable posit ive et Alors Tin 4grale de Lebesgu e de f par 
rapport 'a p su r B es t: 

fdp= Mb (w )f (w )dp(w ) = sup g dp,pou r apt a$je positive tel le quecj 

B B 

Pro priete. S oit f une fonct iofln- mesu rable posit ive et soit /GsftBAIor s: 

1. Pourc>0, cfdp=c fdp. 

B B 

2. SiA c B , alors fdp< fdp. 

A B 

3. Si g est un e fon ct/tomesurable positive tel le qfl£Q< g alor sQ< f dp < g dp. 

B B 

4. Si p(B ) = 0 alors f dp = 0. 

B 

The off'm e (Tbberrie de conver gence monotone (Beppi$ST(f n )n est un e su it e croissan te de fon c- 
t ion s mesu rabies posit ives con vergean t simplemen t vers f su r Q, alors: 

Mm f n dp = fdp= Mm f n dp. 

C o ne'qu e n cBou r les eries de fon ct ion s mesu rabies posit pmst tou jou rs appliquerteifhne 
de con vergen ce mon ot on e et don c in verser la seignaile.et I'in t' 

Lemm e (Lemme de Fa to fi^xit (f n ) n est un e su it e de fon ct ion s mesu rabies posit ives alors: 
limjnffn dp<limjnf f n dp. 

E xe m pi Appliqu er Fatou 'a)(fel le quefn =11 a etf 2 n+i =11 b . 

1 . 2 ,2lnte g ral e de Leb es g ue d' une fonctersli Ire et pro pities 

De fini ti o rS oit (QA, p)un espace m esBU GA et soit f une fonct ioA- mesu rable 'a valeaefSers 
tel le que f =f + - f avecf + = max(f , 0) etf = ma x-ff , 0).On dit qu e f est p- iBcfrable su r B si 
|f | dp <+o° . 0 n a alors 

B 

f dp= f + dp- fdp. 

B B B 

N o tati o nLorsqu e f est p- iegtrable su r Bioit |f | dp <+oo , on not ef GL 1 (Q,A, p) (on dit quef 
estL 1 ). 

E xe m pi fegrale de Rieman n efegrife de Lebesgu e. 

Cas de la m as se de D irac. 

Pro priete. On su ppose quef 1 (Q, A, p). Alor s: 

1. (af+(3g)dp=a fdp +|3 gdp pour (a,(3)GIR 2 . 

2. Sif <g alors fdp < g dp. 

The oe-'m e (Tla oeime de co nver g ence otoaTTtle te b es g fiei)t (f n )n est une su it e de fonct ions de 
L 1 (Q, A, p) teMes que pour tourt G IN, |f n | < g avecg GL 1 (Q, A, p). Si on su ppose qu e)(ton verge 
sim plem en t vers f su r Q alors: 

Mm f n dp= fdp. 
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E xte ns i o be Theoieme de Lebesgu e s 'appinplsfien t dan s le cas fi>)nixtfri verge presqu e part out 
ver s f. 


00 f(x) 

E xe m pi £on vergen ce oggrble elpendant d'u n paeirre : par ex emple ^ dx. 

The off'm e (leig aditie J ens erSJ.oit (QA, IP ) un espace probfflbiiiait <p : Ift* IR une fonct ion convexe 
et soit f :Q -* IR mesurable tel le que (p(f ) soit une fonctegratotte par rappor t 'a P . Alors: 


cp fdIP < (p(f)dlP. 

E xe m pi S oit X u n e v.a. s u lAflP )■ Alors (p ( IE )£) IE (<p(X )). 

1 . 2 ,3Me s ure s i ndui te s et dees i t' 

The off'm e (Ttooerrie du Tr a nsp o6ti)it f un e fon ct ion mesu rable\)$ilfil,an s (QA) tel le querp 

soit la mesu re in du it e par f (doliAc)p= p(f _1 (A )) pou rA GA ) et soit cp un e fon ct ion mesu rable de 

(ti, A) dans (IR3(IR)). Alors , s ttp GL 1 (Q,A, p), 

cpdpf = cpof dp. 

o n 

De fini ti o rSoit p et v deu x mesu res suAXQQn dit qu e p domin e v (ou v est d®eiipar p) et que 
v est absolu men t con t in ue par rapport 'a p lorsqu e€p&u p(tA$u=tlA==> v(A) = 0. 

Pro priete. S oit (QA, p)un espace m eseblrune fonct iorefi'nie su r (0) mesu rable et posit ive. On 
su ppose qu e poiGAN, v(A)= f dp . Alors, v est un e mesu re siAr),(Qpm iee par p. De plu s, pour 
t ou te fonct ionedji dile su r ^ , mesu rable et posit ive, 


gdv= g.fdp. 


En fin , g est v icigtrable si et seu lemen t si g .f esigraiblfe'. 

De fini ti o rOn dit qu e p mesu re su AOCfcst o -fi n ie lorsqex^itte une famil leiHAi , avec I cfe'n om- 
brable, d'en semble&del le que Ai = Q et p(A) <+ 00 pou r tou 1£l. 

The off'm e (Tfebeime de Radon-Niko dynSJn su ppose qu e p et v son t deu x mesu res a -fi rfiibs su r (Q, 
tel les que p domine v. Aloisxiliste une fonct ionefidiie su r (fi) mesu rable et posit ive, obeli' sit' 
de v par rapport 'a p, tel le que pour tSAtAv(A) = f dp. 

A 

The oern e (Tboeime de Fubini)Soit Q =Q i x Q 2 , A = Ai ®A 2 et p=p 1 ® p 2 (m esu res a fi n ies ), 
o'u (Q, Ai,pi) et (O 2 , A 2 ,p 2 ) sont des espaces m essuSroit une fonct ion f: Q -» IR, A- mesu rable et 
p - inerrable, alor s: 


fdp= f(wi,U2)dp2(w>) dpi(WL)= f(wi,W2)dpi(wi) dp2(cu>). 

O Qi 02 02 Oi 

1 . 2.4 E s pacet p 

De fini ti 0 rSoit (Q,A, p) un espace meserOn appel le espaib£(Q,A, p), o'u p > 0,1’en semble des 
fonct ions f :Q-> IR, mesurables et tel les q(f4 p dp < + 00 . 

i/p 

De fini ti 0 rP.ou rf GL P (Q,A, p), o'u p > 0, on notfe p = |f | p dp 

Pro priete (I ne g adcteH b Ide r Soit p > let q > 1 tels que - + - =1, et soit f GL P (Q,A, p) et 
g GL q (Q,A, p). Alor s , fgEL 1 (Q,A, p) et 


fg i< f p . g q . 
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Pro priete (I re' g aditi'e Minkow s kS)oit p> 1 et soit f et<£L p (Q,A, p). Alors, f +g GL P (Q,A, p) et 
f +g p < f p + g p . 

Rem arqu Pou r p > 1, . p defi n ie ain si su r un e semi- n otr^sAr p). Pou r obt en ir un e n orme, 
il fau t se place dan s l'espePc(©JA, p) obt enu en "qu ot ient&dfil,"A, p) par la relation d’q'u ivalen ce 
f = g p- presqu e part c(iates fe-dire qu e dansIfll^A, p) on dira que f = g lorsque f = g p-presque 
par t ou t ). 

De fini ti o rPou r f etg G IL 2 (Q,A, p), on de'fin it le produ it scalaire < f , g >f.=g dp. On mu niain si 

IL 2 (Q, A, p) d'u ne st ru ct u re d'espace de H ilbert . On dira qu e f est ort hogon ale 'a g lorsqu e < f , g >= 0 

C o ne qu e n cii A est un sou s- espace vect feireb 'de IL 2 (Q,A, p) (par ex emple un sou s- espace de 
dimen sion fin iei)lprs pou r tou t£ IL 2 (Q,A, p), il ex iste un uniqu e pi©jfflrtt'hogonc& f su r A, note' 
f a , qu i er ifi e£ = Ar^ mf g - f 2. 

2 A pp lication s de la tbor ie d e la mesu re et d e I'ietjr ation en 
P r ob ab 

2.1 Esper ance de var iablesffidf oir es 

De fini ti 0 r£ oit X u n e var iabteaSloire su r (ffi, IP) un espace probataJiAfor s six G IL 1 (Q,A, IP ), 
on cte'fi n it I'eepa'nce de X par le n ombre IE X=XdlP. Plus gene'ralemen t, si cp : 4R IR es t beifi'en ne 

et si (p(X) GIL 1 (Q, A, IP), on (tefi n it I'espa'nce de (p(X) par IE (p(X)= (p(X )dlP. 

Pro priete. Si X es t u n e variableatl'oire su r (fl, IP ),si 9: IR -» IR es t b®lienne tel le que <p(X3 
IL 1 (Q,A, IP), et si IR est la mes u re de probabliiitX alor s: 

IE «p(X )= <p(x)dlR(x). 

IR 

C 0 ne'qu e n ce. - Si IPx est absolu men t con t in ue par rapport 'a la mesu re de Lebesgu e (don c X est urn 
v.a. dit e absolu men t con t in u e),sfe<dailios&lE cp(X )= (p(x)f x (x)dx. 

IR 

- Si IPx est absolu men t con t in ue par rapport 'a la mesu re de compt age su r IN (don c X est un e v.a. c 

dis art e), de denepfc', alors IE cp(X )= px (k ) <p(k). 

k =0 

Pro priete. 1. SoitX et Y des var iablesaitoires tel les que X ¥tG IL 1 (Q,A, IP ).AIors pou rtout 
(a , b(EIR 2 , aX + bYGIL^O.A.IP) et 

IE(aX + bY ) = alEX + b IEY. 

2. S oit X u n e var iabtebb'ire su r (Si, IP), et soitAGA. Alors IE (U(X )) = IP(X GA). 

3. S oit X et Y des var iablesaatoires tel les que® IL p (Q,A,IP) etY G IL q (Q,A,IP) avec- + - =1 

P Q 

et p > 1 , q > 1 . Alor s )GJK 1 (Q,A,IP) et 

IE|X ,Y|< (IE|X | p ) 1/p (IE|Y| q ) 1/q . 

4. Soit X et Y des var iables ab'toires tel les que X ¥t G IL P (Q, A, IP ),avecp > 1. Alor s X +Y G 
IL p (Q,A,IP) et 

(IE|X +Y | p ) 1/p <(IE|X| P ) 1/P +(IE|Y| P ) 1/P . 

5. Soit X u n e var iableealt'oire tel le que)^ IL P (Q, A, IP) pour p > 0. Alors pou r tou6 <r < p, 

X GIL r (Q,A,IP) et 

(IE|X | r ) 1/r <(IE|X| P ) 1/P . 
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6. S i X es t u n e variabteiteb'ire su r (£2, IP), si (p : IR-» IR est un e fon ct ioreben'ne convexe tel le 
que X et cp(X) GIL 1 (Q f A, IP), alors 

IE(q)(X )) > cp(IE X ). 

De fini ti o rfP.ou r X et Y des variableseealtoires tel les que X e1£YIL 2 (Q, A, IP), on <£fi n it la covarian ce 
de X etY par 

cov(X,Y ) = IE [(X- IE X )(Y— IE Y )]; 

On appel le variance de X, var(X ) = cov(X , X) = IE (EX) 2 = IE ()^) - (IEX) 2 . 

Pro priete. Su r l£(Q,A, IP), cov (., .fefln it un produ it scalaire. De plus 
|cov(X , Y|f < var(X ).var(Y ). 

2.2 Fonc t ion deepar t it ion et quant iles d'une loi de pr obalailit' 

II y a une co rr es p o nda nee bijective entr e la co nna istsaerllBsatbf hPIPx (]-°° , x]). La fo nc- 
tio n deerpa r titio n p ereigietfeme ntdfenrifr'les qua ntiles qui so nt es sentiels 'a la co ns tr uctio n d'inter va lie: 
de co nfia nee et de test. 

So itaG[0 , 1 ]. Des prsfcqsrde la fo nctio n dparr titio n, on ©dialit q u’il ex is Se&IR, te I q ue: 

x lim Fx(x) <a< Fx(xa). (1) 

So itl a = {x a GIR te I q uexver ifie (!}■) On a pp elle quantile (ou fractile, ou p ercentile en a nglais) d’or dre 
a de la lo i U?, nofcq a , le milieu de I'inter va ileE videmment, lo rsque X a dmet une distr ibutio n a bso I- 
ument continue par rapp ort 'a la mesure de Lebxesfy^tp), o'ul* 1 desig ne la fo nctie n rpr o q ue 
deFx. 

Deux ca s pa r ticulier s so nt 'ifcreo nna" 

1 / p o ur a = O.Si.scpst appella me di ane de*P; 

2 / p o ur a = 0 .2 5 et a = 0 .7 5 (r esp ectiy.e@nsiia|t)),*$sont appe4'pr emier et tre iraie quarti le 

(r es p ectivement) de IP 

3 / p o ur a = 0 .1 , . . . , 0 .9 , on paffteite deiPf 

2.3 P r inc ipales lois de pr obabdft' 

Loi uni form e di s ete: 

C’est la lo i de pr o baebdiiote 'a va leur s e(aips . . ,x} te lie q ue 
IP (X =Xi )= i. 

O n a lors : IE X=(xi + .. . +Xi) et var(X ) = “(><i + ■■ ■ +£) ~ (IE X) 2 . 

Lo i de Be rno ul I i: 

C’est la lo i de pr o baebdiii ete noeleB(p) 'a va leur s d|0pl^ te lie q ue 
IP(X = 1) =p et IP(X = 0)=1 -p. 


O n a lors : IEX = p et var(X ) = -p(fi). 

Loi bi nomi al e: 

C’est la lo i de pr o baebdiii ete noeleB(n, p) 'a va leur s e(0,rib, . . . }rte lie q ue 
IP (X = k ) =<£ ■ p k ■ (1 - p) n_k p ourkG{0, 1 >n 
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0 n a lors : X =Xi-- "+Xn, o'u ($ est une suite de v.a .i.i.d. B^plbid’o 'u IEX =rp et var(X ) =np(l- p). 
Lo i de Poi ss on: 

C’est la lo i de pro baebdiii et'e noete'P(0 ) 'a valeurs dans IN telle que 

ok 

IP (X = k )=— -e -0 pourkGIN. 


0 n a lors IEX = 0 et var(X ) = 0. 

Loi uni form e s ur [a, b] 

Cette loi es t §rer a lement eetl'([ a , b <3>)',u-°° < a< b< °° . C’es t la loide pr o babbit' a va leurs 
da ns [a, b] de dasipifcr rapp ort 'a la mesure de Leb esgue: 

fx b^~a ' llxG [ a ’ -bl 

0 n a a lors IEX =^^ a et var(X )= ^ ^ . 

Loi Gam ma: 

Cette loi es t §rer a lement Boety (p , ®0u p > 0 et 0 > 0. C'es t la loide pr o babftit'a va leur s da ns 
IR+ de densatpar rapp ort 'a la mesure de Leb esgue: 

f x (x) = ^■e“ 0 ' x -x p_1 -llxeiB. 

O n a a lors IEX=^ et var(X )=^- 

SiX ~ y (p , 0 ) et¥ y (q , 0 ) avec X et Y ieiplenda ntes et p > 0 et q > 0, a lo rs-X/-^ + q, 0 ). 

Po ur p = 1, la lo i y (p, 6 ) est la lo i exp oi6£0it)ielle 

Lo i Beta: 


Cette loies t §rer a lement eoetp (p , 0>)u p > 0 et q > O.C'es t la loide pr o babBif a va leur s da ns 
[0 , 1] de derasilar rapp ort 'a la mesure de Leb esgue: 




B(p, q) 

0 n a a lors IEX - B( P + 1> q lt var(X )= ^ q — — 1 

B(p, q) (p + cf)(p + q + 1) 

SiX ~ y (p , 0 ) et¥ Y (q , 9) avec X et Y impilenda ntes et p > 0 et q > 0, ^_ l e^ rs~ p (p , q ). 

Po ur p = 1, la lo i y (p, 0 ) est la lo i exp oi6£0it)ielle 

Loi norm al e (ou g aus si enne) ceete'e'du i te: 

Cette lo i esfcrafr a lement eelNt(0 , 1 ). C’est la lo i de pr o&acbil&leur s da ns IR deedpausrtapp ort 
'a la mes ur e de Leb esg ue: 

r . ,1 x 2 

fx (x)= V-= exp . 

2n ^ 


IE(X ) =0 et var(X ) = 1. 

Loi norm al e (ou g aus si enne) de m oyenne m et de vari arfceo 



11 


Si Z suit la loi N (0 , 1)X = m + a Z suit pa r ctifinitio n la loN (m ,d), loi no r ma le d'erpa' nee m et 
de va r ia n^eiia dens tide X est do rene pa r: 


fx(x)= 


(x - m 
2 & 


f 


La fig ur e A.l . respente la denesdte' la loino r male ceeitie'duite et celle d'unerior ma le no n ceetr' 
e t no reduite. A pa r tir de la lo i ga us s ienne, on pefedt erted'lo is suiva ntes. 


Lo i dux 2 a n de gars de I i b eets: 


So itXi, ,X n , n va ria bleesatlo ir esepcte'nda ntes del\l($0 , 1 ), a lors 
S =x 2 + ■ ■ ■ +X „ 

suit une lo i du^'a n de^rde lib art,' lo i nete^(n). Cette lo i est 'a va leur s d-a,ra£dftepr a nee n et 
de va r ia nee Etes t a uslaiiloi Ga mma y (n / 2, 1/ 2 ), e’es t-'a - dif^fftnfeX dmet p o ur deeip&r 
rapp ort 'a la mesure de Leb esgue: 

fx(X)= 2"«T, n /2f' 2 ~ leXP ~2 

o 'u la fonction Gamma est telle que T(a)=x a _1 - e“ x p oura> 0. Enfin,si X suit une loix 2 (n ),par 

definitio n on dir a q ue ^^tasuit une lo i&-x 2 (n). La figure A.2. exhib e troisiradiilf'ents de deies it' 
de lo i du^. Lo i de Stude nta n de gar s de I i b ffl-ls': 


La lo i de Student 'a n tiegie'lib eartnotie T (n), es t la lo i du q uo tient 
T= 

S/n 


o'uN suit une lbli(0 , 1) et S suit une lj?f(n ),N et S'eta nt deux va r ia fcxtesta if esepdenda nttis. 
e sig a lement p o ss ib^ederdner la deesdtune telle loi par rapp ort 'a la mesure de Leb esgue, 'a savoir, 


fx (x)= 


n-B (1/2, n/2) 


- ( n+l)/2 


o 'u la fonction Beta est telle que B (a, ^ 1 ^ p our a > 0 et b > O.La figur e A.3illustr e deux 
e xemples de cette deeisqiide To n co mpaarg a lement avec la dencfceitla loino r male ceeteeduite. 

Remarqu e : Pa r la lo i des gr a nds no mbr es, plus n est gr a nd, plus S est peDadmeffile|i$iovia ©4pf. 

L e tino mina teur est do nc pr o che de 1. II s'ensuit que la lo i T (n) est d'a uta nt plus pr o che d’une lo i no r 
que n es t g r a nd. 


Un des pr incipa ujeratt' de la lo i de Studestde da ns le fa it qua,siX,X n so nt n va r ia btea id ir es 
indep enda ntes deNtfin ,tf), si o n co neriati' la moyenne et la va r ia nee empir iques: 

Xn = ^(Xl + - +X n) et (Xl-Xn) 2 + + (X d ~Xn) 2 ) , 


a lo rs 



s uit une lo i de Student '-al(r> de gsrde lib ert' 
Loi de Fi s her an i etn 2 de gas de I i b art' 
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So itSi etS 2 deux va r ia blesaatb'ir es«pdenda ntes derlais p ec tiv^is^ etx 2 (n 2 ). Alo rs pa raff- 
nitio n: 


Si/n i 
S 2 /n 2 


s uit une lo i de Fisheri etri 2 de cpE'de lib erjthoie F (nn 2 ). 


Rem arqu d?a r les names co nercfe' tio ns queqarde mmelatloi F est d'autant plus pr o che de 1 que 
le s de§3"de lib erb'i etn2 so nt g r a nds. 


Onaega lement les piete'psulva ntes: 


> Si F suit une loi F(n i,n 2 ), a lo rs la lode ^ F est une loi b eta de se co ndesee pie pa raebnes 
(ni/2 ,n2/2 ), c'est-'a -dir e que F est 'a va leur+salaanctnffet la denespte'r rapp ort 'a la mesure de 
L e b e s g ue: 

f , v > 1 m/2 n?/2 x m/2-l 

fx(x) “ B(m/2,n2/2) ni ' n2 (n 2 +ni-x)(^ +n ^ 2 " {xa03 ’ 

la no ta tion Bedig na nt enco re la fo nctio n Beta. 

- SiF ~ F(n i,n 2 ), a lo r s IE(F )~ n2 lo r squer> 2 et var(F ) - 2 ^ ni | 0 r squer>4. 

n2-2 ni(n 2 - 4)(n2 - 2f 

• Si T s uit une lo i de Student T (n), a fesralt une lo i de Fisher F (1 , n). 


La fig ur e A.4 . do nne isnedd'la distr ibutio n d'une lo i de Fisher panmrliffcho ix des paetiaatTs. 


2.4 Indep endance 

De fini ti o rS oit (QA, IP) un espace probabilis' 

- Soit (Ai)iei une famil leetf ombrableedbn emen ts &e On dit qu e le3B\en emen tSiO&i sont 
in ^pendants si et seu lement si pou r t ou s les sou s-ensembles finisK 


IP Ai = IP(Ai). 

iSK i€K 

- Soit( Ai )iei une famil le de sous-tribusAiddonc pou r t ou © I, Ai <=A ). On dit qu e les t ribus 
(Ai )ia son t inelpendant es si et seu lement si pou r t ou s les sou s-enseirfbleseffirpsKr tous 
lese\en em en fc^Ak aveckGK, lesA k son t ine^en dan t s. 

- Soit (Xi)iei des var iablesaat'oires su r (ffi), 'a valeu rs dans BflR)). On dit qu e les v.a. (Xa 
son t ineqtendant es si et seu lement si les t ribu s<en$^rf<(IB'(IR)))ia son t ine|Den dan t es. 

Prop os i ti onSi (Xi, ■■■ ,X n ) s on t des variablealablres su r (^QJP). Alors les (X) son t inependan t es 
si et seu lemen t $UP-. a) = IPx,. 

i=i 

Prop os i ti onSi (Xi)ia sontdes var iableseslf oires insffen dan t es su A(CH? ).AIor s les (X) sont 
in ^pendant es si et seu lement si pou r=tlgj t/ii, pou r t ou t es fonct ioelsdron'esj |jg=j tel les que 
g (Xj ) soit in igrable, alors g g 

IED g (Xj )□ = IE (g(Xj )). 

j ej jej 

Coroll ai re. (Xl, ■■■ ,X n ) sont des variabkestartires ieplendant es si et seu lement si poq,r-t gtw)t^t 
IR n , 


CP(Xi, -,X 1 )(tl,- ,t n )= (pXj (tj ). 
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2.5 Vect eur s alat oir es 

De fini ti o i©n dit qu e X est un vect astaire su r IP ), un espace probabiiiisX est un e fon ct ion 
mes u rable deA$dan s ( I K B ( I R d ) ) . 

De fini ti o rfioit X un vecteu r adat oire su r (fi„ IP) 'a valeurs danslRAIor s la loi(ou m es u re) de 
probabil&de X, IPx , es t dfi nie de fao/i un ivoqu e 'a part ir de la fon ct «pra rid trio n de Xel le que 
pou r x = («■■■ ,Xd), 

Fx (x) = IRc ( ]-» ,Xi]) = IP(XG ] — 00 ( Xi ]). 

i=i i=i 

Pro priete. Soit X un vecteu leat'oire su r ®,IP ) 'a valeu rs daliSDRsu ppose qu e X =f,(X ,X d). 

Alor s lesX s on t des variablesafebires su r IP), de fonction d®par t it ion 

F Xi (Xi)= x F x (xi,- ,Xj,- ,x d ). 


Les m es u res de probabjjjtdet er rreesde faqn un ivoqu e 'a part ijcdsofi t apfsds lois margin ales 
de X. 

0 n se pla ce ma intena nt da ns la ba se ca no nique ortho rfoSir^aetetclflilRiec te ueatlo ir e 'a 
va leur s suf'lfon definit IE(Z ), le vecteur dont les co oiadeais o nt leases pices des co orecteside Z. 
Ainsi, si da ns la ba se ca no niqu^ ae=tRZi, ■■■ ,Zd) , 


IE(Z) = 


De la neme maeir e, o efdiir a I'eerpa'nce d'une ma tr ice do nt les ceesrstonrtndes va r iatelaicaiKes 
pa r la ma tr ice do nt les co eredcsranrit leases pices de cha cune de ces va eia bdieii e b'. 

Ceci no us p er metefeiif'la ma tr ice de va r ia nce-cova r ia nee de grctedaiwaanfte: 

var(Z) = IE [(Z- IE(Z )).(Z— IE(Z ))] 

do nc si Z = (^--- ,Zd) , 

D Zl D D var(2 Cov(Zi,Z 2 ) - Cov(Zi,Z d ) D 

vafl : 0 =| Cov(Zi,Z 2 ) va r(Z) - Cov(^,Z d ) | 

z d Cov(Zi,Zd) Cov(Z 2 ,Z d ) ■■■ va r(Z) 

ma tr ice (d, d) do nfeleuients dia go na ux so nt les va r ia nBjmiehlte3io n dia go na ux so nt les cova r i- 
a nces des co or desndie Z (r ema r quo ns que la va r ia B6teadeZsi la cova r ia nce$tefeZi). 


O n \e'r ifie g a le mentebaulta t suiva nfei C est une ma tr ice (p, d) 'a co oeds rains tete s dasre Is 
co ns ta nts et si Z es t un veciailDarle 'a va leur stlsafasrlBez est un vecteur de ta ille p de ma tr ice 
de va r ia nce-cova r ia nee 

va r(OZ) =C var(Z)-C'. 

E n pa r ticulier , si p va ut 1, a lo rssC a=h es t un vecteur de ta ille d, et: 
va r(h-Z) =h -var(Z)-h. 


No tez que cette dosrna'qua ntifest un sea lair e. SaiJtY- ,Yd des va r ia blossadttb'ir eseipde'nda ntes de 
meme loN (0 ,d), inde'p enda ntes (ce qui, da ns le ca s ga uecpuii8'B,leatt , 'a cqY(^ = 0 po ur i = j ). 

0 n co nsaefe le vec te ur Yi=-(YYd) . E n r a is o n dffi^radida nee, Y es t un vecteur ga us sien a dmetta nt 
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une densely (par rapp ort 'a la mesure de Leb esgife quinilBs t le pr o duit des derateitha cune des 
co or domes , s o it: 


fy (yi, ■■■ ,yd) =f Yi(yi) xfy 2 (y 2 ) x ■■ ■xf Yd (y d ) 

= 2 H 0 2 exp -^(yi + ■■■ +yd) 

= 2nd 2 _d 12 exp —Xj , 

ave c y = iy- ,yd). On vo it do nc que la deratelfne <4p end q ue de la noY maslle est co nsta nte sur 
to utes les sphi'e s c erets'eerzx Cela implique q u'elle est inva r ia nte pa r ro taetroifflomjtlsrprgo na le 
d'a xe pa ssa nt pa r 0 : elle est inva r ia nte pa r tetoties bteliBaomdir a que Y suit une lo i ga ussienne 
isotrop e. Rapp elons que leseteoiieE co rr esp o ndent 'a des cha ng ements de baeses OiNftcEn m' 
c o eq'uence, on a la preeraipr oqdte' ii'mp ortante: 

Pro priete. SoitY un vecteu r eb't oire de fade loin ormale isot rope variaifpctest - 'a- dire qu e dans 
u ne BON les coordoaas' deY verifient IE(Y ) = 0 et var(Y ) =h ■ Id. Alors les coordoteas' de Y dans 
t ou te BO N sont encore de&lltQs,c?) in <ipen dan t es. 

Vo icima intena nt I’un desultats (encore a p^flSrle oeime de Co chr a n) que no us utiliso ns le plus et 
no us en donnons do nc laneodiis tr a tio n. 

Th e oern e (Tb oertie de Co chr a $K)itE i etE 2 , deu x sou s- espaces vect oriels ort hogon au1< de E = IR 
de dimen sion s respect et soit Y un vecteu realf oire de fade loi n ormale cereb rsot rope de 
var ian cdb Alor sPei(Y ) etP e 2 (Y ) s on t deu x variableatadfires gau ssienne eestin e^endan t es et 
Pei(Y) 2 (res p. Pe 2 (Y) 2 ) es t u n e l<3icx 2 (ki) ( res p.frx 2 (k 2 )) . Ce tdroiem e seegeralise naturel le- 
men t pou r 2 <sid sou s- espaces vect oriels ort hogidni^ynxdfi E= IR d . 

Pern nn st rat i§o it (p--- ,eki) et (® 1+ i,"- ,eki+k 2 ) de ux B 0 N de6tE2 (res p ectivement). L'ens emble 
de ces deux ba s es pte etco nefri en 

(eL,--- ,eki,eki+i, ■■■ ,eki+k 2 ,eki+k 2 +i, ■■■ ,ed) 

p our former une BON d^lfdu fa it queE etE 2 so nt or tho go na ux). 

So it OL ■■■ ,Yd), les co or doeras'de Y da ns cette ba s^)e s s 0 nt epdenda ntes de N)(0 ,d) ca r le 
cha ng ement de ba se est or tho no r ma I et no us avo ns vu que la cfetferilb(uliiaseic|B9'YYr a nsfo r- 
ma tio n isffitrmique. Co mme 


P E .(Y)=Yiei + - +Y ki eki ==» 

Pei(Y) 2 =o 2 

— V 

0 

+ 

0 

Pe 2 (Y ) =Yki+ieki+i H — +Yki+k 2 a<i+k 2 =» 

Pe 2 (Y) 2 =o 2 

Y kl +i 2 + 

0 

- + 

a 


O n vo it bien ainsli'indep enda nee entr edeax pr 0 jectio nsletfa itque la loi de Pei(Y) 2 (r esp. 

Pe 2 (Y) 2 ) est une lo i^ x 2 (ki) (f esp.d x 2 (I<2))- ■ 

O n p euteffnir plus gne'r a lement un vecteur ga us s ien Y 'a va lei/f bndannd^lete'), d'e sepr'a nee 
p GIR d et de ma tr ice de va r ia nce-cova r ia nee I quelco nques (du mo ment que I so it une ma tr ice de To 
de finie p 0 s itive). &pi»a ut 'aWir un vec te aaid'ir e de denp&r rapp ort 'a la mesure de Leb esgue 
sur IF?, 

fY(y)= (2 |ii exp _ 2 (y_,J) - 

p ouryGIR d , e t ave|£| le cfe'ter mina nt de la ma tr ice I. Rema rquo ns une no uvelletfas qaeldtdp' 
va r ia naefiaMs s ent coetpjlnent la lo i de pr 0 ba <U>liih' vecteur ga us s ien. 

A pa r tir des pr ®fc'rg§rer a les s ur les vecteem tcaif'es, on 0 btient le fa it que: 
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Pro priete. S oit Y un vecteu rgau ssien 'a valeu ^(damfsdE^nere), d'esqiran ce[£IR d et de mat rice 
de varian ce- covarian ce I. S oit C un e mailriieffile'tail le (p, d) oQJfsJ*. Alor sC ■ Y est un vect eur 
gau ssien tcpd e: 

C Y ~N (C p,C I C ) 

0 n en elduit le s coeqsuences s uiva ntes: 

• si Y es t un vecteur ga us s ien is o tr'bfjQsvterlFd n<?est h un vec te ur d& IStlo r shY es t une 
co mbina isonelanir e des co ordeside Y te I q ue: 

h ■ Y suit la loi N (0 ,8 ■ h ■ h)= N (0 ,<? ■ h 2 ) 

• si Y es t un vecteur ga us s ieierdbeiscp'p et de ma tr ice de va r ia nee I et si h un v^cidorrde IR 
h ■ Y est une co mbina isoediiir'e des co orele ande Y et: 

h ■ Y s uit la lo i unidimensio ■ p,h ■ I ■ h) 

(Po ur une pesenta tio n pluetdIBe des no tio ns sur les vecteur s ga us siens on p eut co ns ulter le livre P. 
To ulo use, 19 99 , cha p.2) 

2.6 Fonc t ions car aertist iques 

De fini ti o i£oit X un vecteu resdf oire su r (A )„ IP) 'a valeurs dan^.IRa fonct ion caraxtst iqu e deX 
est la fon ct ioRqxlR d -» c tel le que 

(px (t) = IE [e x p(i < t, X > )]= e j< t ' x> dlFV (x), 

IR d 

d 

o'u <. >d esign e le prodieitalaire eu clidien sui^lftel qu e < t, x >= tj Xi pou rt = (ti, ■■■ ,td) et 

i=i 

X =(x l, ■■■ ,Xd). 

Rem arqu ta fonct ion caradst iqu es ex iste su r l;R(§t)p= l.cp est au ssi la t ran s§Erialie' Fou rier 
de la m es u re. IP 

The oern eSoit X et Y des vecteu rseat'oires su r ®,IP) 'a valeurs dan^IRe lois IR et IFV . Alors 
IPx =IPy si et seu lemen teiepepy . 

The oe-'m e (Tfeoeime d’inver sioSi)X est un vect eueadjoire su r IP ) 'a valeu rs daftatfcicpx 
est un e fon ct ioregrible par rapport 'a la mesu re de Lehesgir dly alors X admet un e dere§i*' 
par rappor t 'fiiel le que pour£IR d , 

fx(x)= e _i< t X> cp x (t)dt. 

(2 rtf iR d 

Pro p os i ti o n. Si X est un e variebteaa1e su r 0Q,IP ) de fonction caearistt iqu esxpAlors si IE|(X | n )< 

+oo (ouX £IL n (Q,A, IP )),(fx es t n foisaf'ivable e||f?(t ) =i n IE (X n e ltx ). 

Rem arqu iorsqu e ces momen ts ex ist en r tl,ED(K l b)i =(Px n) (0 ). 

2.7 Convergence de suit es de variablesedf oir es 

Le m me (Lemme de Bo r el- Ca rSeltiXAn)ne in u ne su it evtfri emen ts su rAP,P ). 

1. Si IP (A) <+ 00 alors IP(lim supA) = 0. 

2. Si les (Ai) son t inelpen dant s, IP(A n ) =+ «> impliqu e qu e P (lim SnOJpAl. 

De fini ti o iSoit (X n ) n eiNU ne su it e de variabtefitalifes su r ®,IP). On dit que 
-(X n ) con verge en proba±>iJiif s X , naXn - P -^ X , lorsqu e pou r t ou t £ > 0, 

n [im IP(|X n — X | > e) = 0. 
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-(X n ) converge dan S(I£D,A, IP ) vers X , neK' n X , avec p > 0, lors que 

Mm I E |X n -X | p =0. 

-(X n ) con verge en loi vers X ,aXo,t' n “> X , lorsqu e, 

Mm Fx n (x) =F x (x) pour tou tXEIR tel qu eft cont in ue en x. 

-(X n ) con verge presqu es‘u remen t v®X X , X , lors quiE GO avec P (E ) = 1 tajue 
VwGE, limn-.- X n (w) = X (u) 

<=> pou r tou t e > 0, 

n Mm IP ( sufjiX m - X | > e) = 0. 

Pro priete. 1. p .set IL P — » P — >L . 

2. pou rep p, IL q — * IL P . 

3. La convergen ce en loi niee pasla con vergen ce en pi®Udbitit(Xi - P -^ C) <==> (X n C) 

pou r C une const ant e. 

4. Si g est un e fon ct ioietarTie con t in ue alors n H|-+ X)= => (g (Xi) n - P -^ g(X )). 

Pro priete. 1. Si pou r tou t e > 0,IP(|X n -X | > e) <+°o alor sXi X (applicat ion du Lemme 

n=0 n_>+ ” 

de Borel-Cantel li). 


2. Si il ex iste r > 0 tople IEpC„f>< +0 ° et IE(|X n - X | r ) <+ °° alor sXn X. 


Th e oem e (Lo i fa ible des Gr a nds No nSbite(^h)ne in u ne su it e de variabtai sires iapendan t es 
et iden t iqu emen t dBisibAlors si IfXi |) <+ 00 , 


Xn= Xl + " +Xn 


m = IEX. 


The oem e (Lo i fo r te des Gr a nds No rfibMXH)ne inu ne su it e de variabtefitaJires iiwpendan t es 
et iden t iqu emen t detsibAlors si IfXi |) <+ 00 , 


X n 


X l + ■■■ +X n 
n 


p. s. 



m = IEX. 


Th e oe'm e (Tfeoerhe de la limite centr a3ei)t (X n )ne in u ne su it e de variabtei slires ieqtendan t es 
et iden t iqu emen t detsibAlors si&= lEXj 2 <+ ® , et m = IEX, 


V -X n - m 
n 


N (0 , 1). 


The oem e (Lo i fo rte des Gr a nds No mbr es multidimerfsixiJtilKeJtehN une su ite de vecteueai-aT 
toires 'a valeu rs darfs iliRt&pen dan ts et iden t iqu emen£9disftloiib8us'i IE(Xi )<+ <» (pour . une 
n orme su r^B 


X n _ X i + ••■ +X n 
n 


m = IEX. 


The oe'm e (Tboerhe de la limite centra le multidimens iS®iiti£i$n)ne in une su ite de vecteuea-aT 
toires 'a valeu rs dan^IRi bpen dants eten t iqu embistt riba.'Alor s sil mat rice de covarian ce de 
chaqu eXex ist e, et m = (EX ^ _ 

nX _ n -m N d (0 , I). 


The oeme (Delta-metho c§oit (X n ) n e iNune su ite de vecteueeiartres 'a valeu rs dcipisiltpen dan ts 
et iden t iqu emdrstt riba, Tel le que I matrice de covariance de chaqu®* ist ®t m = IEX i. Soit 
g :IR d -> IR P un e fon ct ion de clfiSssu r un voisinage au t ou r de m, de mat rice J ac^bmeheejm. 
Alors, ^ 

ng()Tn)-g(m) N d (0 ,J g (m) ■ I -J g (m )). 
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2.8 Esper ance condit ionnelle 

De fini ti o tS oit Y u n e var iabdetadiire su r IP ). SB est un e sou s- 1 ri$ue4esiY EIL 2 (Q,A, IP ). 

Alors on not e IE {B) la project ion ort hogon ale de Y^iflirBLP ), appefe' esgrance conditionnel le de 
Y sachantB. Ain si: 

IE |Y — IE (Y|B )| 2 = inf IE |Y — Z | 2 . 

1 11 zeiL 2 (n,B,iP) 1 1 

Par ex t ensioai Y E IL^Q.A, IP ),on defi n it I'eepa'nce conditionnel le par rappdBt camme I'u n ique 
( p.s .) variablosat'oireB- mesu ralatefivan t p.s.: 

IE (Y|B ) dlP= Y dIP, pour tou tBGB. 

B B 

De fini ti o riPar convent ion, si X un vect eeiaitalire 'a valeu rs d^nsiliR' (GY IP) et si Y une variable 
aleat oire su r (/ft, IP), on note lEOfX ) = IE (Y|X _1 (B(IR))). 

Pro priete. 1. Lemme de D oob : PouGTfL^Q.A, IP), et X une v.a. de(fi, IP ), alors p.s. IE(|Y()= 
h(X ), avec h une fonction fetoen ne. 

2. Pou rYi etY 2 deu x variablesat oires su r ®,IP ), et (a, b, GJR 3 , alors 

IE (aY+bY 2 +c |B) = alE (Y|B) + blE(Y|B) + c. 

3. SiYi <Y 2 , alors IE(Y|B) < IE (Y|B). 

4. Le Lemme de Fat oilies theoiemes de Beppo- Lek/qbesgu e £fensen s'appliqu ervtec I'esepan ce 
condit ionn el le. 

5. Si Y G IL 2 (Q, B, IP), alor s IE(Y|B) = Y; ain silE(g(X) |X) = g (X ) pour g une fonction mesurable 
reel le. 

6. On a IE (IE(Y|B )) = IE Y. 

7. Si Y _1 (B(IR)) et B sont in dpen dan t es alors |B )(Y= IEY; ain si,si X et Y son t incfe'pen dan t es, 

IE (Y| X) = IEY. 

8. Si (X , Y ) est un couple de v.a. 'a valeurs &pos^ian t une dera£ijx,Y) par rapport 'a la mes u re 
de Lebesgu e, alors si X esfegrible, 

IE (Y | X =x)= i r y f(x ' Y) ( x> ^ d y pou r tout x tcplie f(x ,y> (x, y)dy > 0. 
i R T(x,y) (x, y) dy ir 

Prop osition. Si (Y ,Xi, ■■■ ,X n ) est un vect eu r gau ssien , alt^XlEfY ,X n )) =ao+aiXi+- ■■+a n X n , 
o'u lesason t desels. 


3 Estimation p ar anatr iq ue 


3.1 Definit io ns 

Da ns to ute la suite, on se pla ce sAr (K) un espace de pr o bebQiln co neide Whin une suite 
de va r ia blesatb' ir e, o 'u cha <?isdt)dfinie s ur ((&„ IP ) et est 'a va leur da<n$El 

De fini ti o n. - On appelle mode st at ist iqu e de dimen sion n un espl^c^UQi), o'iA n estune 
t ribu su r (p et p u n e m es u re de prebEabrliJ(P n , A n ). 

- On appel lechantil Ion de tail le n duehecsfat ist iqu dKAin. P) le vecteu eat'oire (X • ■ ■ ,X) 
dis t rileB'selon la loi p. Pou iSuQ, (Xi(w ), . . . rXw )) vecteur d^ 1 Ids t apf^chantil Ion observ' 
C'est ' a part ir et su r ce vect eu r qu e it *trcataid|u e s'effect uen£®al)g ' 

De fini ti o rOn appel le: 

-Mod'ele st at ist iqu e pebraopoie, une famil le de ralectie la for m e : (IPA n , IFb,0 GO), o 'u0= 
IR P . 

-Mod'ele st at ist iqu e semi-epiaqawi'une famil le deetode la for m e :)ft£An, IRe,f),0 E0,f G 
F ), o'uOc |R P etF n'est pas de dimen sion fin ie. 
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-Mod'ele st at ist iqu e n on-e|bafi^iinerie famil le de msid'de la for m e : (j£3A n , |R ,f EF ), o'u 
F n’est pas de dimen sion fin ie. 

De fini ti o n. - On dit que le mode paraietriqu e : ((SjF,A n , IFb,0 G0), o 'u0= IR P , est dom epar 
u ne mesu re p lorsquj edPabsolu men t con t in ue par rapport 'a p pS0.r t ou t9 

- On se place dans le cadre d’u n ®to0araietfiqu e (($\A n , lft,0 GO), o 'u©= IR P , dom iepar 
u ne mesu re Ijtou r (x, ■■■ ,x n ) G (Q ) n , la fonct ion0G0 -» Le(xi, ■■■ ,x n )= ^j(xi, < x n) est 
appede un e vraisemblan ce dalmstlat ist iqu e. 

E xe m pi e. - Dan s le cas o 'u p efci mesu re de Lebesgu e sdV IS vraisemblan ce sera la de® sit' 
(classiqu e) eniCx- ,x n ). 

- Dan s le cas o'up est compt ag^^ka tvliaisemblan ce sera la protabiilitx, ■■■ ,x n ). 

- At t en t ion ! si le su ppoistd^dfi d de 0, la mesu re qu i domin e (aire£Aqi)i ie©peu tefJen dre 
de 0 :il ne fau t pas ou blier de teiper dan s I’ex pression de la vraisemblan ce. 

De fini ti o rtors qu e I’on dispose d&clmantil Ion (ft . . . ,X) du mootile st at ist iqu e)C(®/ n , p), une 
s t at ist iqu ®Etun e applicat ion mesu rable d^((0,) dan s (1$, B(IR d )), done un vect eu eatoire 
defi ni su r (ftJP) 'a valeur dans d l,Ret tel le que: 

T n = h(Xi, . . . ,X), o'u h: (Q ) n -» IR d est mes u rable. 

E xe m pi £st imat eu r du paetena'd’u ne loi de Bern ou I li. 

Est imat eu r de Ibeap'ce et de la varian ce par la moyen ne et la varian ce empiriqu e. 

Est imat eu rs du pffltaei0 d’u n eehantil Ion (ft--- ,X n ) de loi un iforme su r [0 , 0 ]. 

Test su r la m oyen n e. 

3.2 St atistiques exhaustives 

0 n se placee&brmais dans le cadre d’une ole dta tistique paeter ique ((£JT, A n , IFfe,0 G 0), o'u 

0 <= IR P , do mie pa r une mes ur e p. 

E xe m pl d.. S oit le rnedb st at ist iqu e |$araque[0,o° [ n ,B([0,oo [ n ),U([0 , 0®ir),0 G]0 [ .On dis- 

pose don c d’u recihantil Ion (ft--- ,X n ) de v.a.i.i.d.su ivan t u neilxui iforme su r [0 , 0 ]. Si on ere sid' 
ma>^Xi .. ,,X n } cela semble su ffire pou eqtersfeou te I’informat ion su r 0 qu e contenaitXft: on 
a don cesu enT'in format ion ” su r 0 con t en ait.G3K), un vecteur de tail le n, par une statistique de 
tail le 1. 

2. De rreme, si on con eitf le mode st at ist iqu e pBEtraque{0,l} n , P ({0,l} n ), B(p)® n ,p G[0 , l](on 
dispose don c d'u ©chantil Ion (ft--- ,X n ) de v.a.i.i.d. su ivan t un e loi de Bern ou I li dfepapdirail'ors 
la st at ist iquieft--- +X n con t ien 1 1 ou te l’”in format ion ” su r p con fedmaioteildan . ,X). 

Comment exprimer formel lemDentait qu 'u ne st at ist iqu e psiia'serr'a el le seule toute I'information 
s u r le paraibnr'e? 

De fini ti o r&oitT une st at ist iqu e ^iljerabdt ist iqu e is&naqnj'e doraira' valeu rs darisflJb dit que 
T est une st at ist iqu e ex hau pbivefebu te st at ist iqueejiSab1fe'(don c dan^([D. ) n ,A n , IFfe)) alors 
IEe(S | T) ne depen d (APpresqu es’u remen t) pas de 0. 

The oern e (Tle'oerhe de fa cto r isa tio n de NeyrSaitij|Xi, ■■■ ,X n ) un n-echantil Ion eioitT une 
st at ist iqu e duertiacat'at ist iqu e pBiraqu' e donaiavec T 'a valeu rs darfs cbRudG IN*. La st at ist ique 
T est ex hau st ivefeseu lemen t eXIiste une fonct ionlRf 1 -* IR+ et une fonct iort^. ): IR d -* IR+, 
tel le que I’on puise'ire pou r t oui (x . ,x) G(Q ) n : 

Le(xi x) =ge(T (xl x)) ■ h(xi, . . . ,x) pou r tout© G0. 

Le m m eS oit le moade st at ist iqu e pdroapoTe ((QP,A n , IFfe,0 G0), o'u0c |R P . Alor s ce m eki'est 
dom iesi et seulement si il existe une sous-fa©mildBntJfablee(IFe in tel le que pourtouGA, Vi GIN, 

1 Pei (A) = 0 en tinBeV0 , 10(A) = 0. Tou te mesu re de proteatidita for m £ tP ie , N ai ■ IP® avecc >0 
pour tou tGIN et ie , n q = 1 domin e le metef 
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Demon st rat ion rtu lemrere II es t bien cla ir q ue si une telle meteKi^tfe, le maete' est do nran ' 

=> Mo ntr o ns ma intena nt d|©®nsj die est do marpa r une mesur e p a lo rs la fa ngjMt ilrPex is te. 

E n pr emier liesi,p est une mesur e no n finie ma is o -finie (pa r exemple la mesur e dalbetbsfegue), 
1 p( A n Ai ) f 
L 2 |i(Ai) 


definie pa r^i(A)= 


- pour toutA GA , est une mes ur e de pr o 4>ac(DLIit/a lente ' a p (avec 


(Ai)ie iisr- une par titio n de'KDte lie q ue 0 < pQA: oo p our to utE IN*). On tr availle doncecfe'o r ma is 
ave cp. 

Po ur0G0, so m le so us - ens emble $ecf£IR n qui est le supp ort de la dodetlPe par rapp ort 'a p. 
So it 


c = b 0i , i c in, a ee, 


iei 


Tens emble de to utes les unienosnalbr a bles d'ens err®bl©srBno te M = si^cPp (C ).So it (G)ne in 
une s uite d'ens emble§ telle q ue la s uit® ((<pn))n co nver ge ver s M (une telle s uite ex enbefotr c' 
s ino n M ne ser a it pa s le s upr emum). Rema r quo ns qteralhanpjBiSioaTid mbr a ble lo rs 
une suite OQ de 0 suffit pour engendr er la swDt^ (C Si on p os e: 


D= C n = Be k , 

nSIN kSIN 

a lors M =p> (D ) et p our touts©, B e u D GC et: 

Pp (Be u D) < M < pp (Be u D) =pp (Be n D c ) +pp (D) 

Do nc p o ur toiSSB,p p (Be n D c ) = 0 so iH/B G0, I Pe ( B e n D c ) = 0 puis q u® IP<pp . En co nsq uenc e, 
p our toutAGA n ,A <= Be u =(Q ) n , so it: 

IPe(A n D c ) = 0, ca r pa reflinitio n desfi IPe(B|) = 0. 

Si on supp ose maintenant qS$4, es t te I q u$ (R) = 0 , ave c la s uiitfc 1066® demmenfeWie, a lo rs 
pp (AnBe k ) = 0 pa ratfinitio n desBet do nop(AnD ) = 0 (par la pr oefH'de a - a ddib\dlt/ne mes ur e). 

C o mmeelP:<pp , on ensfcfuit q iM) G0, IFb(AnD ) = 0 et donce(B0 = IPe(AnD)+ = IPe(AnD c ) = 0. 

Ains i, II s do mine bienel?) o ur to ut©0. ■ 

Demon st rat ion dBoTnEime de fact orisat ion de N e yman : $©=it l(| , N ai ■ IP 0 une mes ur e de pr 0 ba- 
bilite do mina nte co nstr uite co mme da ns le lemme. 

<== Sige(T (x))'h (x) ave cG(Q) n es t la dene de IB par rapp ort 'a p, a lof^| N ai ■ ge; (T (x))-h(x)= 
g*(T (x))-h(x) es t une derasd&P * par rapp ort 'a p. Alors, comd(fre(g:))'h(x) > 0P*-p.s., do ncd-Pp.s 
p our toute variablealto ir e Segtra ble, pour tc£L®0 

I Ee(S ■ Mb ) = 


= IE 


= IE 
= IE 

E n cone q ue nd'e,p®'s la dfinitio n de I'eerpa nee co nditio nnelle diffiftlUn, IFb), on a IPe- p.s ., 
IE*(S | T) = IEe(S | T ) : la s ta tistique T est bien exha ustive. 

=> On supp ose que T est une statistique exhaustive p oeleleDoand'p 0 ur to ute sta tistBqge- ianlb'le 


SdIPe, p our to utBEo(T ), tr ibu engendie pa rT 

3 

S(x)-g0(T(x)) h (x)dp(x) 


S(x) 


qs(T (x))-h(x) 


g*(T (x))-h(x) 

II. .am.s 


dlP*(x) 


g*(T) 
qe(T) 
g*(T) 

0 Mb -IE*(S |T) 


: Mb ■ 


IE*(S | T) (d’a pe's la dfinitio n de ro25r|a'nce co nditio nnelle) 
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H| ph 

I6(S | T) = IEe(S | T ). En co iffisf uence, si on no te <p(x,i^jNx) la densatde IB par rapp ort 'a 

= IE e IE*(S | T), (ca r T est exha ustive et (£9 Ips' pr 0 pteis de I'eer p'nce co nditio nnelle) 

= IE * cp(X , 9) IE m (S I T), o'uX~IP* 

= IE * IE* <p(X , 0) IE*(S | T) | T , (d’a pes les pr ofte'is de I'ees" pi 'nee co nditio nnelle) 

= IE * IE* (p(X , 6)| T ■ IE* S | T , (carl£S|T est une fo nctio n de T) 

= IE * IE* S ■ IE* (p(X , 0)| T | T 
= IE * S ■ IE* q>(X , 0)| T 

Ains i,la va r iableea Ito ir e*l^(X , 0)| T, qui est une fo nctio n de T (qsit elle eme une fo nctio n s ur 
(Q ) n ), es t la densade IPs par rapp ort 'aJ.PPa r suiteja vr a isembla nopei,es t la densacte IPe par 
r a pp ort 'a p,csf'it: 

Le(xi x)= ^(xi x)= ® (xi X) ■ ^jjp(xi X) = IE* tp(X , 0)| T ■ h(xi ,x), 

avec h une fo nctio n mes ur a ble. ■ 

E xe m pi different es st at ist iqu es ex hau st ives pc&lieislpairaiiatfiqu es de loti n ifor mete loi de 
Bern ou I li, de loi gau ssienn e... 

Pro priete. On se place dans le cadre d’u netecpi'raiet'riqu e donain' 

1. La st at ist iqu e T =p, (X . ,X) est ex hau st ive. 

2. Si T est une st at ist iqu e ex hau st e^eietestihe fonct iorebenne h tel le qu'une autre statistique 
Uv erifie T = h(U ), alors U esigalement ex hau st ive. 

O n vient de vo ir que I'o n p eut to ujo ur s tr 0 uver une sta tistiquKlealTdiUetrvfeu^fme pa r exe tri- 
ple). Co mme on a ur a mttptlati'da nee ' a vo ulo ir le "ma ximum d’info r ma tio n" da ns une sta tistique exha u 
lor sque le pa isbrne est da n^IBn a imer a it savo ir quelle dimensio n minima le p eut avo ir cette sta tistique. 
E n pa r ticulier , si d = 1, p eut-on to ujo ur s tr 0 uver une sta tistique exha ustive de ta ille 1 ? L'exemple sui 
mo ntr e que ce n'est pa s to ujo ur s le ca s: 

E xe m pi & oit le mode st at ist iqu @°(irQ3([0,°o [ n ), (lFfe)® n ,0 GIR+), 0 'u la deredii'IPe par rapport 
'a la mesu re de Lebesgu q(e$t=f0(| 2 -l)-e“ e x -ll x e [o : bj Alors les st at ist iqnesUha x (&. . . ,X) 
etT 2 =X 1 + .. . +Xn ne sont pas chacu ne ex hau st ive alors qu e,T2)=e(3t ex hau st iOapou rra 
meme montrer que cette statistique est de tail le minimale... 

Defini ti on. Une st at ist iqu e ex hau st ivel? EtuartnBdJlqu e pfetraqiore doieiiarrvec T est dit e min imale 
si pourtoute autre statistique exhaustive U est telete iqtbilune fonct ioreben'n e teivffi an t: 

T = h(U ). 

Prop os i ti on6 oit un mete' st at ist iqu e pinaqrai'e doraiat'soitUjxi, . . . ,x) sa vraisemblan ce. Alors 
T est une st at ist iqu e ex hau st ive minimale pfflderloesnqa'Cxi, . . . ,x) G (Q ) n et V(yi, . . . ,,y) € 

( 0 ) n , 

9_> I -9 !* 1 ' n e cfepen d pas de0==> T(xi ,x) = T(yi, . . . ,y). (2) 

Le(yi, . . . ,y) 

Demon st rat ion de la propo siOroBUPP ose que (2) est vraie et on supp ose (sans f$i®-treaJd)gfl'ue 
la vr a is embla nee es t str ictement |SostttiGdm(T ((Q) n )). No tons#* ET _1 ({t}) c (Q ) n . Alo rs 
Vx eT _1 ({t}), T (x) = T (k T(x) ) et do nc d’aps'(2 ), 

h(x)= — — es t indp enda nt de 0. 

L e (x (T( x y 


S, V0 , 

IP*, 

IEe(S) 
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Po so ns$ ) =Le(x (t) ). Alo r sfe.(x) =ge(T (x)>h(x). Comme ceci est vr a i p o ur€tCOj)t!}<; la sta tistique 
T es t bien exha us tive. 

Supp oso ns maintenant que S est une a utr e statistique exAtastpser le th oerfte de fa cto r isa tion 
de Neyma ril existe deux fo nctio (f^cpth (s) (ne cte'p enda nt pa s de 0 ) telles que p o ur£t<$Qit9(, 

Le(x) =ge S) (S (x))- h (s) (x). Ainsi p our to ut£(Q ) n ety G(Q ) n tels que S (x) = S (y ), alors: 


Le(x) _ c£ s) (S (x))- h (s) (x) _ h (s) (x) 
Le(y) g[, s) (S (y))- h (s) (y) h<s) (y) ' 


q ui es t iB(j enda nt de 9. 


Mais d’a fas' (2) ceci n'est p ossible que si T (x) = T (y ). Done T est une fonction de S et la statistique T est 
do nc minima le. ■. 


Q u’elle serait une sor te d'opp dsla no tio n de sta tistique exha ustive minima le ? Cetfoa/iuaet'' 
sta tistique nepl enda nt pa s du petraecns'o it: 

De fini ti o itlne st at ist iqu e T d’u elenprfaiart'riqu e est dit e libre si sa loapifflictf pas du paefeme. 

0 r, de fiaq n assez sur pr ena nte il p eut ar r iver qu'une sta tistique exha ustive minima le co mpr enne une s 

tique libr equi intuitivement ne devr a it pfersa pr ise en co mpte p o ur do nner to ute I'info r ma tio n sur0 

(so it pa r exemple la I© dlgcste ete'q uidis trebeis i£6 — 1, 0, 0 +JL; p our uiecha ntillo n de ta ille 2, la 

sta tistique -X<d,X 1 +X 2 ) est exha ustive minima le, n^-teKa) est libr e). Aussi p eut-on ra jo uter 

une a utr e carear c4a tio n des sta tistiques exha ustives p 0 ur p 0 uvo ir a tteindr e une fcpr cm® d'o ptima lit' 

ces s ta tis tiqicpaser a it qu'a ucune fo nctio nnelle no n co nsta nte de la sta tisfeitruHe liloff pkleiife'' 

p euteg a lement se tr a duir e d® ihasCaya nte: 

De fini ti 0 rtJne st at ist iqu e ex hau st ive lldustraldst iqu e petraiopj e donaiavec T 'a valeu r dans 
IR d est dit e cone|b£' si pou r t ou te fonctioarliborhe h : 1ft* IR telle que h(T ) soit ieijfable, alor s: 

V0G0, IE e h(T) =0 =* h(T ) = 0. 

Pro priete. S oit un mffldle st at ist iqu e fESraqu e dorain' 

1. si T est une st at ist iqu e ex hau st iefeocahQfd'pou r t ou te fonct Elreboe'h bijective h(T ) est 
u ne st at ist iqu e ex hau stat/e-compl' 

2. si T est une st at ist iqu e ex hau stetesodcnrpIT est un e st at ist iqu e ex hau st ive min imale. 

3. (Theorem e de Basu )Tiest une st at ist iqu e ex hau st ieteffaitopi'T estn ^pendante de t ou te 
st at ist iqu e libre su r Henod' 

Demon st rat ion de la partro B.' The oeime de Basu. Soit S une statistique libre p our lelenetct'o itf 
une fo nctio n telle q®$flE5 )) existe. Comme S est libre, on p eut noter e(|Qf4SIIJ) une application 
linea ir e neplenda nt pa s de 0. Pa r suite, la sta tj£(tfi(]£i)e| E) -e (f ) est une fonction de T mes ura ble 
te lie q u® lEE^f (S) | T) — e(f) = 0 p our to u©0. Comme on a supp qse T est exha ustive CEteQpl' 
a lors ipf (S) | T ) = e(f ) presque-s "urement : les statistiques S et Tepoeibdradrites. ■ 

De fini ti 0 rO n s u ppos e u netei palraietriqu e ((QP,A n , IFfe,0 60c |R P ) dom ie par u n e m es u re p. 

Si, pou rt ou U-X' ,x n ) €(Q ) n et0 £0, la vraisemblan ce de ceerteqoiar rapport 'a p peeidrisfe's ous 
la for m e: 


Le(xi,--- ,x n ) = exffl (3 (0 ) + bLCx- ,x n )+ aj (xi, ■■■ ,x n ) ■ aj (©)□ , (3) 


avec les fonct iorijsa(Q ) n -> IR, b: (Q ) n -» IR, aj : 0 <= |R P ^ |R, et P: 0 -* IR, alors on dit qu e le 
motfle est ex ponentdelqu 'iiippartient 'a la famil le exponentiel le). 

E xe m pi Appartiennent 'a la famil le exponentiel le les lois: 

- Loi dis cet es : Lois de Bern ou I li, bin omiales, de Poisson ,... 

- Loi "continu es” : Lois normales, ex ponentiel les, gamma, du chi-deux ,... 
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Rem arqu S.i (Xi, ■■■ ,X n ) es t u n ©cb'antil Ion d'un rebriex ponent iel (avecejBdiors Ten semble des 
valeu rs prises pari(X- ,X n ) ne cfe'pen d pas du paeinre 0. 

Pro priete. S oit un mete' ex ponent iel. Si pou r EiSLictiQ note a(0 ) = i((<fi ), . . . p (0 )) et si I’ensemble 
a(0 ) est d’iretieu r n on vide, alors T, (x ,x n ) = (ai(xi,--- ,x n ), . . . ,p<xi,--- ,x n )) est un e st at ist ique 
ex hau st ive minimale etebmpl' 

Demon st rat ion de la prim rSo it g : lft-» IR te lie q uee(§ (T )) = 0. Oitf0 £0, 

IEe(g (T ))= g(T (x))- exp |B(0) + b(x)+ < T (x), o(0) > dp(x), 

(Q) n 

o'u < . >edig ne le pr o duit sea la ir e. Ebuc® imteld'mes ure vde d®*qDi[tb'(x)) par rapp ort 'a p, on 

o btie nt: 


IEe(g (T )) =0 => g(T (x))- exp(< T (x), a(0) >) dv (x) =0 

(O')" 

=> g (y) exp(< y , a(0 ) >\Qp) =0 

T( (O' )" ) 

p our tout0G0, en aya nt la mes ur e ima ge de v pa r T et ave)?]rE(l£R p . Si on no te§ etg - 
les pa rties p os itivesgafe rbives de g (do nc^-=g“), etn + etn“ les mes ures de dersjitetg - par 
r app ort '^va lors, p o ur to ©0: 

exp(< y , a(0 ) >fdyt)= exp(< y , a(0 ) >)“#). 

T ((O ) n ) T( (O ) n ) 

E n consquence s ur 0, do nc s ur une pa relrieedi'rindt ho n vide, les mestiebin o nt des tr a nsfoearf 
de La pla e§'a les : ces deux mes ur es soegtadtesiet do tiegg “ v T - pr esque pa r to ut (ce qui r evient ' a 
g = 0 ). A pa r tir des expr essio nsetfesnddS'mesur es, on mo ntr e que g e^rT^tfUe pa r to iH. 

3.3 I nformat ion de Fisher 

Pour mesurer I'information fournit par unetropte raetnr'ique do naifa'u une statistique sur ce mo d- 
ele) au s ujet d'un pa eirre; une ©ri'natur elle ser a it de mesur er comment var ie lo calement la mesur e de 

pr oba britou enco re sa vr a is embllaeacftuctua tio ns moyennes de cette vr a isembla nee ser a it do nc un 

b on indicateur : p our ce faire on ©xnarefe', lo r squ'il exist§(<je@tli, ■■■ ,X n )), et on s'ini'r e s s e r a 'a la 
ma tr ice de cova r ia nee dteifXtfi ■ ,X n )), do nt on p eut mo ntr er qu’ellepnenotf pa s du cho ix de 
la mesur e do mina nte chbrfecKons d'ab ord la notion de eh© rig ulie r qao us p er mettr aeftett' 
cette q ua rittiTinfo r mation. 

De fini ti o tD ans le cadre d’u neitedt at ist iqu e fffi&rBqn e ((Sff,A n , IFfe,0 £0), o 'u@= IR P , dom ie' 
par un e mesu re p, on dira qu e ©ieTescteig'u Her lorsqu e: 

1. 0 est un ou vert de d l;R 

2. la vraisemblan c®(L) «r ifW(xi, . . . ,*) E(Q) n , V0E0,L e(xi, . . . ,x) > 0; 

3. V(xi x) E(Q) n , la fonct ion0£0 -> lo g(b(.)) es t diriren t iable su r 0 par rapport 'a 0 , et son 

gradien t appart ien ?(l(fi'|)e,A n , IFfe) V0E0; 

4. V0 £0, pou r t ou te fonction HRR appart en an t 1 '(^n'l) n ,A n , IFfe), alor s: 

■h h(x) ■ Le(x) dp (x)= h(x) ■ ^Le(x) dp (x). (4) 

dW (Q ) n (Q )n d« 

C o ne'qu e n cfeou r un marie rigu Her, tEgraqJ(lo gle(. )) =0. 

Pern on st rat:i<£hn a IEn(Le(.)) = 1 do nc lp(g r $dle(. )) = O.Pa r co rasfue ilEn 9 r D =0j 

Le(.) 

s o it (Egr a§J(lo gle(. )) =0. ■ 
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De fini ti o rP.ou run mebfe' st at ist iqu e pESnaqvi'e doraiffegulier, on appel le information de Fisher, la 
m at rice: 

|n(0) = |Ee a(logk(Xi,- ,x n )) w a(logb(Xi, - ,x N )) 


dQ\ 


dQ\ 


Pro priete. Pou r un m®die st at ist iqu e pfcrraap'e doraiiiegu lier, et^xi, 
0 G0 -Ho g (dU) estC 2 (0 ), alors: 

a 2 (lo qU(Xi, ■■■ ,X n )) 

dGi-dej lfii ,j £p - 


,x) G(0 ) n , la fonct ion 


ln(9)=- IEe 


De fini ti o rL'in format ion de FishefKG ) assoee 'a une st at ist iqusedlje existesstla mat rice de 
Fisher de la vraisemblan ce deelf fctf'meBTa part ir de la vraisemblan ce de T ). 

Pro priete. Pou run mate' egu lier, T est un e st at ist iqu e libre si et seu Jdfri&i^tCkil 

P e rn o n s t ra t:ign> Si T est libr e a lors sa lae cte'p end pa s de 0 do nc le gr a dient du lo ga r ithme de sa 
vr aisembla nee est nul ; I'info r ma tio n de Filler asTcesit' nulle. 

<== Sil „ (6 ) = 0, done la s tatistiqueg$kad^(T ))) es t ce eferet de ma tr ice de cova r ia nee nulle. Ainsi, 
p our toutGG 0, il exis te un ensembleMe mesur e 1 p o ur la mesur e de pr®±sastotttf''a T (do nc, 
d’a pes la pr enai'r e hy peEfehd’un moedle re' g ulietel q ue pi(N) = 1 )) et tel que p o ur to ute Ne, 
g r ^lo glj (t ))) = O.Pour montr er que g§@d gL© (t))) = 0 es t bien une va r ia bteta if e nulle p-p.s., 
et do nc que lo Jji) est une fo nctio n co nsta nteilemioGus fa ut mo ntr er que fina lement lassffiffie-d' 
dent pa s de QSo it0 (d) = {0| (d) }ie in un so us - ensemblraodmbr a ble decUpse da ns QCo mme^ 1 
e s teh'o mbr a bleest cla ir que N= i( =| N N 0 <d) es t telq ue p(N) =1. De plus, p our to utGG 0, il 

ex is te une so us -s (fi^MGde© (d) co nver gea nt ver s G et telle que p o ifi feb iptbur to utr£ IN, 
g r ^d) (lo gl^(d) (t))) = 0. Co mme une telle fo nctic^jcMI co ntinue, cette pete'tpaisse 'a la limite, 

et do nc p o ur to atM, V0 G0, gr a§l(lo gL© (t ))) = O.Co mme N nee£ end pa s deaGlo rs la fo nction 
0-> lo glj(.) es t une co ns ta ntepieidda nt pa s de 0, p- p.s. : la sta tistique T est bien libr eM 


Pro priete. Pou r un moade egu lier, si T est une st at ist iqu e ex h^SQivdhfB ) pour tout£0. 

P e rn on s t ra t:idSo mme T estune sta tistique exha ustioie,p eutecr ir e d’aepar'la afemo nstr a tio n du 
The oerhe de fa cto r isa tio n de Neyma n que p ©, ur to*Qt£(*Q ) n et to ut9G0: 
dIFb 
dIP* 


tt^(xi x) =ge(T (* ,x)). 


O n p euteecr ir e cela p o ur la (ieohe Ut so us la fo r mepMt ) =G&(t)), p o ur to ueT((Q') n ) et to ut 

dlP* T 


0 G0. En co nsq uence, p o ur toGu©0 

1 (G) 


3(logMXi,- ,Xn)) a (lo gb(Xi,- ,x N )) 
9 a0i a0j 


a (lo qk(x)) a (lo qb(x)) 


30i 30j 

a(lo g$(T (x))) a (lo q$(T (x))) 


dlR»(x) 

a0 . ~ d& ge(T (x))dlf*(x) ca r lo gffx) = lo gg(T (x)) + lo g h(x) 

1 J isi,j<p 

a (lo g^(t ) ) x d (\o g$t ) ) gg( t ))dlf !fT ( X ) d’a pi's le tiioeime du tr a nsp ort 

3 ■ > n d 0 i a 0 j . 


a0j 

a (lo grit ) ) x a (lo grit ) ) 
aGi aGj 
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Rem arqu €n rajou t an t cert ain esi^qmdiicon t ie siuitr'la vraisemblan ce de T , on peu t mon t rer que 
la reciproqu e asgalemen t vraie, et don c£|(i©$l= 0 si et seulement si la statist ique T est ex haustive. 

Ains i,on r etr o uve 'a I'a ide de la no tio n d'info r ma tio n de Fisher les "inrtaitie cpjit geued' 
da ns la sectio neicHde nte\£>yo ns ma intena nt les a pplica tio ns de la no tio n dtexiii'esdimf tion 
pa r aatnr'iq ue. 

3.4 A pplicat iona Test imat ion paraatYique 

On se place dans le cadre d'un mateds ta tistique paefcrrhque ((sy\A' n , IFb,0 G 0), o'u0<= IR P , 
do mie par une mesure p. Par a illeurs, on supp ose que 0 est un o uver t. 

De fini ti o n. - Soit g: 0 -» 0 , o'u0 <= IR P avecp G IN*, un e fon ct ion mesu r^fcrtieappel le 

est imat eu r de la fon ct ion g duptareifhoYic de g (9 i)i,ne st at ist iqu e T 'a valeu rs danlsrlR 
par t icu lierp est imat eu r du psttaira'9 est une st at ist iqu e 'a valeu Hi dLfrne ®5t imat ion de 
g (0 ) est uneariisat ion de T. 

- On appel le biais d'un estimateur T de g (0 ) le vecteur consftaifl: (fe)IR ffiT) - g (0 ). On dira 
que I'estimateur est sans biais si B (0 ) = 0 pouiS@ut0 

- On appel le risque quadratique de I'estimateur T de®p($>0>4a:if'R (0 ) =e(IB") -g (0) 2 ), o'u . 
designe usuel lement la norme euclidienne (mdtrpeinte autre fonctionnel le positive et convexe). 

Si Test imateu r est sans biais alors, R (0 ) = Trace(cov (T )). 

Po ur p o uvo ir pa r ler du co mp or tement asympto tique d’une sta tistique, on va devo ir se pla cer da ns un 
mo d'leda ns lequdn echa ntillo n est une s uite deEvraq uelq ue socaejros moedle p o ur rasYlre 
((Q ) IN , A| N , IF^ n ,0 G 0), o'u0 c |R P (la dimensio n du pa ratrre r este co nsta RteOir un n file, une 
s ta tis tiquelera d'ab ord une pro jection du "grosdlensudle moetb de ta ille rpuis une sta tistique 
"no r ma le". On devr a do nc pa r ler d'une s uite d'es)tima teur s (T 

De fini ti o rP.ou r un mode st at ist iqu e petriqa e (($ N ,A| N , 11^,0 G0), o 'u©= IR P , et pou r (fT) n 

une suite d’estimateurs de g (0 ): 

- Si lim n ^<x. B n (0 ) = 0, on dit qu e I'estimat eu r est asympt ot iqu ement sans biais. 

- On dit qu e (iT)n est con vergen t lorsqu eY-> g (0 ). 

- S'il ex iste (4 u ne su it e otete' posit ifs t els qwCEia-g (0 ))-^ Ze, o'u^ est u ne loi cera<fe r' 
n on nu I le (nepdriden t pas de n), on diiWIconverge vers g (0 ) 'a la vifcessea 

A pr ior efr e sa ns bia is n’est pa s un broanpEDitir ga ra ntir une cer ta ineeodptimadihver g enc e d’un 
estima teur . Oiejarr er a pdittdiscr iminer entr e de p o tentiels estima teur s ' a bBectEaYitia nt Sur le 
r isque qua dr a tique ou sur la ma tr ice de va r ia nce-cova r ia nee. Cep endae^lflantsagstieepa^ de r' 
p o ur tr o uver un "meilleur " estima teur en ce sens. Po ur en o btenir , on devr a se limiter 'a une cer ta ine 
d’es tima teur s, celle des estima teur s sa ns bia is. 

De fini ti o rS oit un mode st at ist iqu e pebraaiiofe ((£JT,A n , IFfe,0 G 0), et soit T un est imat eu r sans 
biais de g (0 ). On dit que T est de variance uairffenrtnminimum parmi les estimat eu rs sans biais de g (0) 
lorsque pour tout estimateur sans biais de g (0N$ cov(T)< cov(S) (au sens o ' u covfE)ov(S) 
est un e mat rice posit ive). 

Pro priete. Si T est un est imat eu r de varian ce uenifembhnin imu m pdemiest imat eu rs san s biais, 
alor s ifest un iqu ®-lf?>.s. 

Pern o n s t r at:i6oit S un a utre estimateur que I’on supg a^ement de va r ia nceemi&nit minimum 
pa r mi les estima teur s sa ns bia is. Mo ntr o ns d’^O - ©rSI)qtileE= 0 . E n effe t, SIR, co mmeT 
es t de va r ia nee minimum, en utilis aendj ddstsmr les ma tr icesslyrrcf ues: 

cov(T) < cov(T + <x(T- S)) 

< cov(T ) +dtcov(T- S) + 2a- IE e (T ■ l S) 

< a- a ■ cov(S ) + 2e(ff ■ l (T - S)) pour toutaGIR. 


0 
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C o mme c ovfl5 ) est une ma tr ice p ositavse ule p os sibifito ur avo ir la derm® eng aelifes t q ue: 
IEe(T- t (T— S )) = 0. Pa r suite, co mme e<&)(¥ IEb (T-S^fT-S) =IE 0 T-^T-S) — IEe S-^T-S ), 
et que I’on a supped? et S de va r ia nee minimi 0 ia(T- S) = 0. Do nc T = S s ur un ensemble cfee IP 
me s ueej'a le 'a 1. ■ 


The off'me (Ra o- Bla ckwSlilJT est un estimateu r sans biais de g (9 ) et si S est une statistiqu e ex hau stive, 
alor s R = IE(T | S ), qu i neaqbend pas de 0 car S est ex hau stive, est un estimateu r sans biais de g (9 ) de 
mat rice de covarian cerieif re oegale 'a cel le de T. 

Pern on st rat:ibrest cla ir quedC* ) = IS(T ) = g (0). De plus, pour tou&IR p (ave cg:^ IR P ), 
covfu-T) = IE e V(T-g(0 )] 

= IE e IEe V(T -g (0 | S 


> IEe IEe l u ■ (T -g (0 )|)S 

> covfu-R). 

Ce la r ev ie nt bieerr iiae que cov3"£ov(R ). 


d’a pe's I'ie g aditiej ens en, 


The off'me (Lehma nn- Scta)ef61 T est un estimateur sans biais de g (0^i£test une st at ist iqu e ex- 
hau st ive et coetpdalors I'u niqu e estimateu r de g (0 ) sans biaisemndbrtnnJe varian ce min imale est 
R =IE e(T | S ) ( e'esat dire qu e R est une fonct ion de S ). 

Pern on st rat:i6o itT un autre estimateur sans biais de c£(®0=IE e(T' | S), on sa it que cov()T> 
cov(R) d'a par's le Ttaoerhe de Ra o- B la ckwelleCW'-HER ) = 0 p our to u£B0 ca r les deux es tima teurs 
so nt sa ns bia is. De plus co mme Boetft des fo nctio ns de -5 RR Test a uss i, et du fa it que S est une 
sta tistique exha ustive et efcariplfo rs pour tdEua0R =R , IPe-p.s. Pa r coeicpjent, p o ur to ffl0, 
cov(R) = cov(R ) et done cov(f^ cov(T): R est bien I'estima teur sa ns bia is de va r ia noEnomiifiib r m' 
minima le. ■ 


Reteno ns do nc de to ut qeei I'estimateur sans biais de g (0 ) et de variance em&rrtnnhinima le est 

une unique fo nctio n d'une sta tistique exha ustivetet torra<n>ilf'une telle s ta tis tique exis te. On a imer a it 

ma intena nt coitrrraun p eu mieux la cova r ia nee d'un tel estima teur. 

The oern e (l®g aelitie Cr a mer - RS oitun meld st at ist iqu e |ffiirapn e (($?,A n , IFb,0 GO ) dom- 
ineet regulier, et soit T un estimateur sans biais de g (0 ), tellqifedB- °° . Si on su ppose qu e Tin for- 
mat ion de Fisher est un e mat Bfiende posit iatars, en n ot an^(0 ) la matrice jacobienne de g , pour 
tou t0G0: 


cov(T)> ^(0)- (l n (9 JT 1 ( au sens des mat rices etynrq'u es ). 

En part icu lier, si T est un est imat eu r san s biais de 0, alors: 

cov(T)> (I n (0 )T 1 (au sens des mat rices etyniiq'u es). 

Pern on st rat:i(Srp itZe(x) = g r a d(lo <g(bc)) o'ux G (Q ) n suit IPe. On sait que comme le meld'e st 
re g ulie re/2B) = 0 p our to ut®0 et do nc: 

cov(2) = I (0) pourtoutCEO. 

De plus, T est un estimateur sans biais de g (0 ) done p o&0Dut0 


IEe(T ) = g(0) 


3Le 


T(x) ■ t^(x) dp(x)= t^( 0) (e n d'r iva nt) 

(Q ) n 00 00 

T(x) ■ ~^(x) ■ (L e (x)) _1 dlFte(x)= f2 (e) 

(O ) n 50 30 

: 
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Ainsi, d'a fa's c e q ueqakfe, 

co\ 6(T - ^(0) ■ I _1 (0) ■ Ze) = cov 0 (T) - 2^(0) ■ I - J (0) ■ l ^(0 )+^(0) ■ I “'(O) ■ ‘^(0) 

= cove(T)-^(0)-r 1 (0)- t ^(0). 

E n cone q ue ncoemme cg>(T - ^(0) ■ I _1 (0) ■ Ze) est une ma tr ice p ositfviae g aditfe Cr a mer - Rao 
est pr o a\e'. ■ 

Co ro I I ai r©eu x cas part icu liearatneh t at t en t ion: 

- Si le motile es t de la forme (0O,A n , (fe ■ dpf n ,0 G 0), alor sl n (0 ) =n ■ 1 1(0 ),o'uli(0 ) est la 
mat rice d'in format ion de Fisher d’u ne seu le satiable Id ist riiajsu ivandtfdp et I'l egalii' 
de Cramer- Rao devien t don c: 

cov(T)>-- t^( 0)- (I i(0 JT 1 ■ l ~?(0) (au sens des mat rices etyitqu es ). 
n do do 

0 n voitdonc qu e pou r eohantil Ion de variablesapelh dan t es et iden t iqiderrtifffttes,si la 
vrqjsemblan ce estjur'iife, alors la vit esse de con vergen ce de t ou t est imat eu r san s biais est au mieu> 
en n. 

- Si le motile n'eslpas egu lienji ais qu e sous la probadtRil,' la mat rice d'in format ion de Fisher 
ex ist e et est in versdtleurtou t da propreite ( 4) es ter Ifee, alor s riegalii'de Cram er- Rao est 
ver ifee. Cel a e xcl ut cep endant I es red ds do nt I e s upp o rt cted§ p e nd de 0 , comme par 
ex emple le simple BleatTev.a.i.i.d. de loU(]0 , 0 [), avec 0 > 0. 

De fini ti o (Si un est imat eu r san s biais at t ein t (respect ivemen t asympt ot iqu emen t) la born e de Cram 
(qu i nee^end pas de I'est imat eu r), on dtequdrSkp. asympt ot iqu emen t) efficace. 

Rem arqu iln est imat eu r pelurtf san s biacte varian ce min imartegis ne pas at t ein dre la borne de 
Cramer- Rao, don c ne^aisa efficace. De larni'm aerie, il peu t ex ist er des est imat ea aS bieiigriant 
la born e de Cram er- Rao. 

Nous allons voir que les rated exp o nentiels jo uent un r "o le centr al p o ur I'estetraidflcerppEsqauim ' 

so us cer ta ines co nditio ns ils so nt les seuls pour lesquels on a ur a une estima tio n sa ns bia is effica ce. 

The oern eSoit un motile st at ist iqu e petdqi/e ((f) n ,A n , IFfe,0 G 0), avec0 <= |R P , dom ieet 
regu lier. Soit g : Iff* IR d de clas s© 1 sur 0 tel le que la matrice esrcfe tail le f|“j(0 ) soit de rangp 

pour tou tC£0 . Alor s T=?(Ti, . . . ,J) est un estimat eu r sans biais de g (0 ) at teignant la borne de Cramer- 
Rao si et seu lemen t si leetoelst ex ponenfetqilu s pcitemen t s'dx iste des fonct ions a)f(Q IR, 

P :0 -> IR etoij :0 -> IR (1 < j < p), tel les que pour toi£©, g (0 )=- ^*-(0) ■ ^(0 ) et 

dWi l<i, j < P dtJ 

□ d □ 

Le(xi, ■■■ ,x n ) = expO p (0 ) + hCx" ,x n )+ Tj (xi, - ,x n ) -q (0)0 . 


P e rn on s t ra t (©«= On supp ose done leerle dx p o ne etieitafla ns letrterhe . Si o artee par rapp ort 
'a 0 un tel melel,'on o btient que p o ur p- pr es qufe(Ol)£ltx 

■ 


i (0 )= ^-(0) -co^m- 1 ^(0) 

l<i, j <d 


COV)(T ): 


^( 0 ) -Key 1 ^( 0 ) 

(7U| 2<i i <n 0O| 
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Par ailleurs, comme T est un estimateur sans biais de g (&)lal'|aipeuve de dig aelitie Cr a mer - Ra o, 
IEe TU- 4 ^(logU(.)) = f§(0) 


et en utilisa nt (5 ) que I'o n multipli 


gls(. )) , o n o btie nt: 


IEe ^(logla(. )) ^(lo gle(. )) =IE e ^(0) ■ T ■ 1 ~(lo gle(. )) +IEe f|(0) ■ 1 ^(lo gle(. )) , 


30 

et done I (0 )=^-(6 
a r r ive 'a ce que: 


30 


30' 


30i i<i,j< p o 

(0 ). A I'aide de cettag aeljtet en r epr ena nt le cabc&dlipr't, o n en 


co\6(T)= ||(0)- 1 ), 

do nc T a tteint bien la b or ne de Cr a mer -Ra o. De plus, gr ’a ce 'a (5 ), 


r(0) 


. $&, 


( 0 ) 


s o it 
et do nc 


» , 9 ) «,,; 9 ( 9 H t (9 > 




( 0 ). 


=> D'a p®s la pr euve de big aelitie Cra mer-Rao, si T est un estimateur sans biais de g (0 ) a tteignant la 
b orne de Cra mer -Rao, a lors 

co\e(T - 30 (0) ' 1 1(0) ' Z9) = °- 

Ains i,p o urto ut®0, il exis te un ensembtefct (Q ) n te I q uedfNe) = 1 et tel que p o urto iSfcle, 

)= fe (< 

de Fisher p our une sta tistique libr e, orepeeuti idler un ens emble ISfepesdda nt pa s de 0 , tel q ue cette 
pr opete so ifeg a le ment vr a ie, avec p(N ) = 1, ce q uieceirie qiilji^N, 


a(0 ) le vecteur colonned’gmfeht" I (0) ~|(0) 


Alo r s en iegrant par rapp ort 'at0en no tan: 


(3 (0 ) la fonction 'bnj r a nt'[Q)- ^(0) ■ g (0) 


b (x) une fo nctio n ep drida nt pa s de0 

o n a lo gdlx) = a(0)-T (x) + |3 (0) + b(x), d'aecaiture de la vra isemblance sous for me tflienemp d : 
nentiel, et on retrouve I'expression de g (0 ) pmn4erais o nnement que plus ha ut. ■ 


Co ro I I ai rA I'in versesi I'on dispose d’u n nelecbx ponentrfejiu lier (3)alor s iln'ex iste qu 'u ne seu le 
fon ct ion ('a un e t ran sformat ion atf§ii)i dupparaet're pou vaet re est imer efficacembnstggitde 

.M, 


30i 


30 


(0 ) (noter que cette fonction 


ce n'est pas le cas). L'est imat eu r est alors-:Tft(Xi X) ^(Xi 

covarian ce min imale estetoparr'sa born e d n e Cram er- Rao, soit: 


de n ; dan s le cas de v.a.i.i.d. 
. . . ,X)) et sa mat rice de 


Ne) 
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3.5 E st imat eur du maximum de vraisemblance 

No us a lions voir unetrlmb de p ermettant d'obtenemaent et da ns la plupa rt des ca s un estima teur 
p osesia nt de ds' b o nnes qua titPar la suite on se place une nouvelle fois dans le cadre d’uielieio d' 
s ta tistique pa efcriique ((0F, A n , IFfe,0 E0 ), ave cSt IR P , do mie.' 

De fini ti o tfou r (x, . . . ,x) G(Q ) n , soitG G0 -> Le(xi, . . . ,x) la vraisemblan ce duetmcDn appel le 
est imat eu r du max imu m de vraisemblan ce un e sttat ietqqe p0ur (X- . . ,X) un n-echan t il Ion 
qu elconqu e duetiad' 

L 0n (Xi, ■■■ ,X n ) = supLe(Xi,- ,X n ). 

Rem arqu il n'y a pas de garant ie de I'u a btiti'n tetest imat edJm e net hode pou r I'obt enir (mais 

pas t ou jou rs) rechercher un ex t remu mdleiad su r 0,ce quipou rraet re faiten annu lanlles 

der iees partiel les debars ■ De rrem e, test clair qu e I'est imat eu r du max imu m de vraisemblan ce pou rra 

et rosgalemen t obt en u en max imisan t le logarit hme de la vraiseianbiaaare, laplpgl-'vraisemblan ce. 

En fi n, si I'onedire estimer g (0 ) avec g une fonction bijective, alors g (0 ) sera I'estimateur du max imum de 
vraisemblance de g (0 ). 

Pro priete. S'il ex iste une st at ist iqu e ex hau st ive T ptej alermfiKtest un e fon ct ion mesu rable deT 
pour tou t^0. 

Ppm on st ra tiRinT est exha ustive, d'a pile tfc oerhe de factor isa tion, la vra isemblancedB par d' 
r a pp ort 'a la mesure doming rate f$(T (>t, . . . ,x)) p our to ut6E0 et IFfe- pr esque tout-Cx,x n ) 0 
(Q ) n , c e q ui r e v ie fttp'ra^sque tout.(x,x n ) 0(0 ) n pa r la rarrie dmo nstr a tio n q ue celle deda nullit' 
de I’info r ma tio n de Fisher d'une sta tistiqi/tei1i±>r,|B'. endr e I'a rg ument madeBnal Le r e v ie nt 'a 
pr endr e I'a rg ument ma x ims . . . ,x)), et 0 ser a do nc une fo nctio n de T. ■ 

Pro priete. On su ppose qu e leetBCHi;' fegu lier. Si on su ppose qu 'il ex iste un est imat eu r san s biais efficace 
de 0 alors c’est I'est imat eu r du max imu m de vraisemblan ce de 0. 


Pern nn st rat iDha pi's c e q ubcpde, si le meld'es teg'ulier et que T es t un es tima teur sa ns bia is effica ce 
de 0 , alors le me <fcb es t ex p o ne ntteed} efellit5 ) a enco re lieu, so it p o ur©0ut0 


30 v 


30i 


■ T+ 


( 0 ) ^ 


l<i,j <P 

Co mme T est un estima teur sa ns bia is de 0 , on ; 
ce qui s’a ppliqeg a lement 'a 0 et do nc: 


He) 


■ IE e( J )+ ( 0 ) = 0. 

j< p 30 

0+ ^|(0 ) = 0, p our touffi0, 


00i 


e + f ( 9) = o. 


Mais d’a pr's s $fihition, le meldeta nteg ulier 0 minimise la lo g- vr a isembla nee et a nrejl-eocfe) nc sa d ' 
ce qui impliq ue q ue: 


dog 

30i 


( 0 ) 


■ T+ 

i<i,j <p 


3£ 

30 


( 0 ) = 


0. 


E n consq uenc e, o btie nt: 


He) 


■ T -0 

l<i,j <p 


= 0 = 


T= 0, 


ca r la ma tr ice ctes d/es deadest supp esa de r a ng d. E nfin, I'eiidieiS'es tele 'aitrlture du mtelte' 
e xp o ne ntiel. ■ 

No us a No ns nouseimfesser ma intena nt au co mp or tement asympto tique de I'estima teur du ma ximum de 

vr a isembla nee (lo rsqu'il existe), do nc qua nd la techtenrtide h'tend ver s I'infini. II est cla ir que p o ur 

cha q ue n I'ex pr ess io n de I’es tima teurffisteiteffi; toutle mo die sta tistique cha ifapeir pa lier 'a 

cela, on se placera dans un "grosteteio(d^) IN ,Aj N , IF^,© E0), o 'u0= IR P (la dimensio n du pa efcren' 

r este co nsta nte) da ns leqtelha ntillo n est une s uite diJ’a.ii.a illeursp supp oseraedor ma is que 

to ute chanti II on de ce m®lde es t cons tidurie v. a. i. i. d. , et qu4 N d=W(f e ■ dp)® IN , le modeeta nt 

do mie pa r la mes ur e p^atfa nt la dene de cha q ue^ar rapp ort 'a p. 
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Th e oem e (Co nver g ence de I'es tima teur du ma ximum de vr a is embla nce)el©p3icapfp'oi£pjte mod' 
((Q ) in ,A !N , (fe-dp)® IN ,0 £0), o 'uQ= IR d dom i© par u n e m es u reeguetier. On su ppose en plu s qu e le 
motile est iden t ifi able (au sei 9 1 s=ef ey,fp- presqu e part ou tjreet p§0 2 ). Alors si la su it erOGeiN 
es t issu e du naledivec pou r paBinre'0 <= 0, 

0! 0o pou r la mesu re 0 (-fdp)® IN . 

Hem on st rat:i5n pr emier lieu, pour e, fiilxest cla ir que pour tc£Lffi0 

logWxi x))-log(bo(xi x))= log ■ 

j _2 T 0o (Xj ) 

Pa r a illeur s, p o ur tSWIi, lesX ont to us la ©me lo i et p o i£©, 

IEe 0 log ~~~~ < log IEe 0 J 9 ^ 1 \ (I ne'g aditie Jensen p o ur la fo nc-tibing) 

te 0 (Xi) te 0 (Xi ) 

< log (WE[fe(Xi)]) 

< 0 . 


E n fa it, du fa it que la fo netlbog es t s tr ictement co nvexe, la b or neffi eaftteiiflife quastif e 0 . 
Ainsi, avec la contrainte d’un rale ctientifia bias d'q ue 0 5=,&ilo r s: 


IE 6o log 


fe(Xi) 

feo(Xi) 


< 0 . 


O n p eut a ppliquer laftor te des gr a nds no mbr es p o ur les veiar ta bldsgi i f 9 ^. X ' \ 

t0o(Xi) 

s o nt bien i.i.d. el Uar le moeJe es teg' ulier ), et a ins i: 


(q ui 

i€ IN 


- dog WXi, 


,X)) - lo g(lso(Xi, . 


log 


• IEe 0 log 


fe(Xi) 

feo(Xi) 

fe(Xi) 

feo(Xi) 


la co nverg ence pr esque s "ur e aya nt lieu p o ur 1% mtipilft 11 ^ (lo ns etf'o ns ma intena nt p o ur to ut 
£ > 0 une fa millerab' mbr a b^’jfei dens e s ur la erpii'de centroefl: de r ayon e. Du fa it du caen$ct' 
deno mbr a ble de cette fa mille, p o ur to ut e > 0, tbfeqisfeefrji o ur to i&m £ , p our to ut£l: 

lo g(^ui(Xi X)) < lo g(MXi, . . . ,X)) p.s. p o ur la mesure£-(dp)® IN . 

Comme le mtete'e sig ulier, p o ur to Stlhl*, la lo g- vr a isembla nee deX,X es t co ntinue sur 0. De 
plus p o urto ut n elle a tteint so n unique ma xijnBimcenrfeq ue nee, p oajrp,0 n se r a 'a Idimte ur 
de la b o ule de centar e8de r ayon e (toujouifEs. p o ur la mesure£-((flp)® IN ). Le ra is o nnemetEt nt 
vr ai p o ur to ut e > 0,<teofelnne s 'e Bdli'it. ■ 

The oem e (No r me Btey mpto tique de I'es tima teur du ma x imum de vr dDseBub^os^ Jeeteod' 
paranafriqu e ((0 N ,A| N , (fe-dp)® IN ,0 £0), o 'u@= |R P , dom iopar u n e m es u reeguetier. On su ppose 
en plus qu e le maiel est ident ifiable et qu e la fonctSc@i0* Le est de clas ). Alors si la su ite 
(Xn)ne in est is su e du naledivec pou r paeime'0 <= ©: 

V n(0 1 -0b) p -^ N d (0 ,f 1 (0o)), 


o'uL(0 ) est la matrice de Fisher de tail le p (agiposrersible) pou r la variableX 


Pern on st ratiifiiomme le moedie es te-g ulieon p eut didf'encier la vr a is embla nee et p o ifi©? ut0 
no te r: 


Me(Xi X)= ^logle(Xi X)= f ^logftXi)). 

n at) n ._ 1 aW 
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Un developp ement lieitfor dr e 1 dsMiuto ur deOest p ossible (toujours en raison diehaoecg ulie r) 
et do nc p o ur to ut tc£L@!0 

Me(Xi X) =M e 0 (Xi X) + (0- 0o) ■ ~M e *(Xi X), 

ave c©da ns le seg mentoI0r,ftmar quons ^We*(Xi X) est une ma tr iceesaiarta ille d). Ainsi 

en r empla ,ca nt 0hpanr6b btient p o ur cha que n I’exis t<^ha<ppla& tena nt au seg I q ue: 

M 0n (Xi X) =M e 0 (Xi X) + (0 -0b)-^Me*(Xi X). (6) 

Pour un mode eg ulie r , o n a vu q^e 1^^- lo gf) 0 (Xi) = —I i(0o), matrice de Fisher p our n'imp orte 

quelle va r ia bleXins i,^Me(. )eta nt une moyenne empir ique, on a pa r la lo i fo r te des gr a nds no mbr es: 

~^Me 0 (Xi, . . . ,X)= ~ ^ !o glo(Xi) - I i(0b) p o ur la mesursi (tlp)® IN . 

Ma intena nt, en utilisa nt le fa it que Iffissfessiht de cla £§£0 ) et en utilisa nt la co nver g ence pr esque 
s^ure de£ve r sf)demo nfere a uihoerfie pece'de nt, o n a: 

^Me*(Xi X) n j + -^ — I i(0o) p o ur la mesurag (flpf IN . 

Fina lement, co mmdt le ma x imum d'une fo nctio n d^ckaefcsBtima teur a nnqJe(Mi X), 

et do ncd'g adif6 ) dev ient: 

M e 0 (X i X) ■ I aT 1 (eb) = (0! -0b). 

Enfin, co mmeM 0 (Xi X) es t une moyenne empir iqeis'ec te uea to ir e vffie un Phdeime de la 

limite centr a le: 

V n M 6 o (Xi X)-IE 9o ^log| 0 (Xi) N d (0 ,t(0b)), 

d'a pes la pr enair eetfinitio n de I’info r ma tio n de Ffabieirime H| ^ lo gt 0 (Xi) = 0 (vo ir les pr o- 
prete' s partfe'dentes ), on o btient la no eiar^litfpto tique de0 ■ 

Rem arqu Sou s ces hypetiiesl’est imat eu r du max imu m de vraisemblasiymapisdrt iqu enaenfe 
biais et efficace. Cepen dant, 'e,rilftad t avoir un biais et ne pbse un est imat eu r efficace. 

3.6 Regions de c onfiance 

E n pr a tique, estimer un potraerte' plus so uvent ne suffit pa s. On a imerib-ii pdusnfflrcis me nt 
q uelle ma rg eaie seibn a sur la co nna issa nee de ceaptao-.a m' 

De fini ti o rOn se place dans le cadre d’u neteoplaraietriqu e ( ( QT , A n , IFb,0 £0), o 'u0= IR P . Soit 
a G]0 , lilj n n om bresfEop'r iori.On appel leeglon de con fi ance du patr®ei0 de niveauia un sou s- 


en sembleaalt'oireR-a inclu s dans fFfet cbfi ni su r A !N ), telqu e pou r tou€B0, {(xi, . . . ,x) G 
(Q ) IN ,0 GRi- a (xi *)} GA n et: 

inf 0 {IPe(0GRi-a)}> l-o. (7) 


S i u lechantil Ion obsefX'i(w ), . . . nKw )) est connu,fl- a (Xi(w ), . . . )) est appelegion de con- 

fi an ce ob9£rtZ)an s le cas o 'u le pBirearcst ureef (p = 1), on pourra obtenir un interval le de confiance. 
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Co mme nfete'r miner unegrib n de co nfia nee ? En pr emier lieu, il est cla ir qu^bOo, iliLfb-dUto© 

(e n gfer a I, on cho isit a pr o che de 0, et en pa r ticulier ®s^(b.0\/5eetfti4friliyne dma r che p oss ible 
p our la construction el§ id n de co nfia nee est la suiva nte : na tur a4terTwS,ibDtrtirser un estima teur 
T co nver g ent de 9 , ma is saplcehd eei# a I de 0 ce q ui r end difScpferf q uelques exceptio ns) son 
utilisa tio n dir eeffie. prefe'rera done utiliser ce que I'on app elle une fonction pivotale quflss © Cine 
fo nctio n mes ur a ble d'un estima teur et de isfetuqeista tistique libiQ® ess ayer a a loesrdf'e la 
pr opete (7) sous la fo r me 

jnf IPe(n(T,0ECa) >l-a, 

o'uQ es t uneog io netier minis t&us sp o ur ra -t-on ensuite co nstr eig ©la cfe co nfia nee en fo nction 
des qua ntiles (s o uvent 'a a/-2x£0) de la Io i de la fo nctio n pivo ta le. 

E xe m pi S.i le moeH'e es tegu lier, sou s les condit ioneodenb la 'de n ormesdaympt ot iqu e du max imum 
de vraisemblan ce, on ppalte'men t mon t reo^rlne de S It u ski) que 

n(0h,e o )= V n- (I i(&)) 1/2 ■ & - 0b N d (0 ,b), 

o'ub est la mat rice ideretdfe'tail le p etli(0 )V 2 ■ (li(0 )Y 2 =1 i(0 ) pourtout0E0. Ain si, si n est 
gran d, on pou rra assimiler la loi d£0®X@ivec la loi n ormale cereteduite multidimensionnel le. Or si 
Z ~N p (0 ,lp), avecq- a /2 > 0 le qu ant ile d’u nmlormale ceret iiedu iteere'l le de niveau! a/ 2, t el 
qu e P (ZE [— qi- a/2,qi- 0/2!^) > 1-a. Au ssi le po^dren - 1/2 ■ (I i^)) - 1/2 ■ [— qi- a /2,qi- 0/2^ recent r' 
aut ou r de6for m era lagfon de con fi an ce cterch ' 

3.7 M-estimat eur 

II s 'a g it ici dsrer a liser les estima teur s du ma ximum de vr a isembla nee. On do emasdsci des cr it' 
gene'r a ux p 0 ur la co nsista nee et la ®asynrmg)til'tique des estima teur s. 

3 . 7.1 Intro duction 

Supp oso ns que nous voulone estipa'r atme 0 rasNa la loi de pr 0 teatilbtbser va tio ns-W n). 

L a netho de p our tr ouver un tel estimateur est de minimiser une fffiinetcbanlarfd: r me 

0-> M n (0 )=- me(Xi) 

n '-I 


I c ina : IR P -» IR so nt des fo nctio ns co nnues. 

E xe m pi ees ti m ateur du m axi mum de vrai sembl anAelmettto ns que QC" 1 ,X n ) so nt i.i.det 
leur Io i 'a p 0 ur ddn^itC'es tima teur du ma ximum de vr a iseSpibtainrioeis e: 

0^M n (0)=- -logfe(Xi) 

n i=l 

E xem pi e : es ti m ateur des moi ndresesariAdmettto ns que WX'i),-" ,(X n ,Y n )) so nt i.i.d. 

IR P ,Y i GIR et ve'r ifient I'equa tio nsacja-ie'ss io e iiriir e: 

Y =0 T X +£ 

0 'u £ est une varialda bb'ir e cen$r,'iie{i'enda nte de X et desjaheg'ra ble. L'es tima teur des mo indr es 
c a es0h de 0 est a Io rs celui q ui minimise: 


6-> M n (0 ) = “ (Yj — 0 T X i ) 2 
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-4 -2 0 2 4 


Figu re 1 - Minimum ma fepaar' 


3 . 7.2 C o n s i s tan ce 

II est imp or ta nt que I'estima teur co nver ge ver s la vr ai vaeteiaWprpascpuB-'s "ur ement ou bien 
en pr o ba kajitfo rsque le no mbr e d'o bser va tio ns n co nver gSiudestllanfiais I’es tima teur es t dit 
a sympto tiquement co nsista nt. Pa r exemple la moyenn&mtpasjqnpto tiquement co nsista nt p o ur 
la moyenne de la p opulation 0 = E (X ) si E (X ) existe. On veut done prouver que: 

6h -^e 

O n supp ose que le M-estimSteranirnimise la fo nctio iinflS ). Clairement, le comp ortement asymptotique 
de0h dep end de du co mp or tement asympto tique de la fo, f€ttli©cniM' une b onne no r ma lisatio n il 
exis ter a une fo nctioan reedier ministe M (0 ) telle que: 

V0 : M n (0)-4M (0) 

II sembie ra iso nna ble que le minimifladieiyMO ) conver ge sous des conditions raiso nnatdde/er s0 
minimisateur de M (9l)fa ut quand enfie fa ir e a ttentio n 'a ce queie^oteblmnimisa tion de M (0) 
s o it biendfDaar'*' edviter ce g enr e de s itua tio n. La fig ur e 1 do nne un exemple d'une fo nctio n qui a bien l 
minimurreg al'a 0, ma is la dr ffiqtedfib n y = 0 est a ussi une asy mpto te. 

The oern eS oit 0 I'es pace des pataims' possibles etlWI des fonctions tel les que pour tout e > 0: 

suR, ee |Mn(0)-M (0)|^O, 
info: e-e 0 M (0 ) > M 69 

alors pou r t ou t es su it es d'est Ifnfeilde que 

0h = ar cj mM n (0) 
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On au ra 

& 6b 

Pern on st rat: iQim a p o ur to ut vo isitobdpfio I'exis tence d'une co ns taM)te Q(te lie q ue: 
V0G0W, M (9 ) > M (JP+ qV) 

Do nc, p o ur mo ntr er la co nsista nee fo r te, il suffit de mo ntr er que p cVudiSoutneo isina ge 
lim 0h cV« lim M(a 1 )-M(0 o ) P < S 'n(V) 


Pa r ctfinitio nM(0h) P ^ M n (6b) et co mme ski<go|M n (9)- M (0)| -h> 0 on aura 

„ p. s. n(V) 

n Nm M n (6h) == M(0o)+ 

De meme on a ura 


Jjm M(6h)-M n (ai) P =0 


et 


Jim M(0h) - ^ P <Nm m M n (0h) P <'M(0 O )+ 

^ p. S. 

fina lement M( 0h) - M(0o) < r|(V) ce qui pr o uve la co nsista nee fo r te du 

Condi ti ons s uffi s antes p our ledtoar'me Pour un mo elle leg ulier les hy peostbs 
fa dies 'a viSes. Po ur o btenir la co nditio n: 

inf M (0 ) > M (0 

0: 6-00 >E 


M-estima teur. 
du^toerne s o nt 


II s uffit que la fo nctio n limite M (0 ) so ient une fo nctio n s tr ictemeiitiitraaikffige^et que p our 
to ut 0 =0, M (0 ) = M (<0. Ce la se r a le csi &] (0 ) est I'eepnce de I'oppeode la lo g- vr a isembla nee, 
e'est- 'a - dir e la dista nee de K ullba ck 'a uneaesmsta nte pr' 

M (0 )= f 0o log ^ 

1 0 

Po ur o btenir I’hyposthde la lo i unifo r me des gr a nds no mbr es: 

sup|M n (0)-M (6] -^0 

0 ee 

une co nditio n s uffisa nte est que I’ensemble ctelsr pa paces' ibles 0 so it co nqpa t4,fo nctio nS 
me(x) so it co ntinue p o ur to ut x et qu'il existe une fo egtra bib qiJtfdo r|nirad<)| p o ur to uffl0. 

Pre uve Po ur une b o ule o uver te B die€bnsnR = su|% eB me etrriB =inf eeB me. Pa r le tle'oeime 
de co nver g ence d© ©nEnffri - itib ] -» 0 lor sque le diaetn e de la b o ule tend verPs Qi.r £ > 0,so it 
B 1 , ■■■ ,B k un r eco uv r ement fini de 0 tel q W)0 [-frimBi (X )] < £. Pour toutOGB 1 , on aur a: 

M n (0)-M (0)< n m Bi (X i ) — E[m B i (X )]< ^m B ' (Xi ) - E[m B ' (X )] +£ 

M n (0)-M (0)>^m Bi (Xi) -E[m Bi (X )]> ^m B i (Xi) - E[m B i (X )]-e 

Ains i, 

sup|M n (0)- M (0K< sup ma x(^m B ' (Xi) - E[m B ' (X )] , -m B i (Xi) - E[m B i (X )])+£ 

0 so ie{i, ■■■, n> n n 


Ainsi, pr esq ue-s "ur dstaenf), lin^oo suf% € ©|M n (0)- M (0)| <£ 
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3 . 7.3 Normal i te'As ym ptoti que 

0 n do nne ici des co nditiecrassa ir e p o ur la noerars$ir+ip'to tique du M-estima teur . Ces co nditio ns 
p e uveetlfe aetioees ma is celles doearco nv iennent p o ur les exedcratiefep'enda nt ce co ur s. 


N o tati o ns 

- Po ur une suite de va r ia trices lailirieR 

Xn =Op(Rn) <=> Xn =Y n Rn etY n 0 

- Po ur une suite de va r ia tries to Ifr ,eR 

X n =0 p (R n ) ~ X n =Y n Rn etY n es t b oeeien pr o ba fettiS'M te I q ueptn I > M) -» 0. 


H yp otte' s esOn supp ose que les o bservations- CX n ) so nt i.i.d. et que les hy$Ecefeh6'uiva ntes so nt 
ve r riies: 

HI Le M- estima td&rest fo r tement co nsista nt 

H2 II existe un vo isina ge V du vr ai pdrraQTbel que p o ur to i£E8^, la de r e/e§me par rapp ort 'a0 
deme(X ) est domiees pa r une fo nctioangrrta ble. 

H3 Le ca ede la cb r e/eri r e: am a 9 e (x) (6o) es t irri/g r a ble. 

H4 La ma tr ice deside/es s e co n^ e^P (6b) es t irrig r a ble et inve r sible. 

0 n a ur a a lors tedrirhe suiva nt: 


The oern eSou s les hypefetes H 1 H 4: 


V n(0 1 -6b)= -E[^(6b)r 1 V^ ^(0b) +o P (l) 

. 

En particu Her la su it©(6n - 0b) est asympt ot iqu emen t n ormale de moyen ne 0 et de mat rice de varian ce- 
covariance^(0b)r 1 E ^(0b)^(0b) T E[^(6b)r 1 


Dem on qt ra tiifin r un rivelo pp ement de Taylo r il existe un veetaitoaiibs ur le s e g me, ift0tel 
que: 


0- ™ + M),^ - w+ l,a, - W T _ w 


Le pr emier ter me 'a dr o ite es t la moyenne dueffbotBriHr Bi ^. a n e (9o> qui 'a p our esrfa'nce: 


E aM n (6o) =0 

Pa r le tle'oeime de la limite centr a le la s o ft!l a n g 9 ° ) co nver ge en lo i ver s une ga us s ienne de moyenneO 
et de ma tr ice de va r ia nee- cova i ^f%ffi l: ^ r | ^ 9 ° ) T . Pa r la loides gr a nds no ml V^^ c 0 nve r ge 
pr esque-s "ur ement vers une ma tr i&^p^E . si k es t la dimens io n du vecteurri)r, M dr 0 csrie 
3 ^g3 (9t)) es t un vecteur de k ma tr ixrik pa r hyp odhs' e dxiste un vo isina ge V driSI que^-^i^ 
est do me® pa r une fo nctio a git a bl^hnCo mm4i est co nsista nt.rlirai 0h EV pr esq ue-s "ur ement 
e t p 0 0r EV on aur a led/elopp ement suivant: 

- Mnido) = j +0 p(1 )+ l ( ^ -ehJQpd) (6h -0b)) = (J +o P (l ))|h -0b)) 


c a r0h - 0o)Op (1 ) =op (1 )Q (1 ) si0h co nver ge pr es que-s "ur emerU^vgr e0Dabidtque la ma tr ice 
J +0 p (1 ) so it inver sible tend ver s 1. En multiptjaantib'nqioEdente par n(J +0 p (1 J} 1 0 n 0 btie nt 
le resulta t a nne nc' ■ 
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4 Tests par anatfr iqu es 

4.1 Princip es d'un test 

Un test p er met, ' a pa r tir dSulirsartlo n d&nhia ntillo n, ctebtler entr e deux hypsadii; en metta nt 
en ava nt une hypeib'pr ivelopieapp de hy p efcheH, et une hy p oefehe a Iter na taw deHi. On 
a ss o cie 'a un test un nivea u a (avec so=i&e®it5x) et une puis sa-n^eLa plupa rt du temps, est 
fixe a pr io ri et p s'eoddiit. P lus prcesne nt, 

De fini ti o tOn se place dans le cadre d’u Blmpdraiat'riqu e doralifO ) n ,A n , IFfe,9 G0), o 'u0= IR P 
et soit 9 la "vraie" valeur du paalare.' Un prc&rtie de t est est un choix en t re deuesh^iot h' 

0 Ho :9 G0o : hypotdse dit e nu I le 

(8) 

u Hi :9 G0i : hypotdse dit e alt ernat ive, 
o'u0 c IR p ,0 i c |R d e t0o n 0i = 0 

C e c i peq e'n p eutepis' er deux typ es de pmoeblde tests suiva nt les co ns titutiQ)re±®le0 

De fini ti o rtlne hypotebe (HouH i) est dite simple si el le est aessoai un singlet o©c$00i). S in on, 
el le sera dite composite. Dans leaJa(©ic IR) , s \H es t sim pie de la formed eOsiHi est composite 
de la for m e 9 >o9ou 9 <9o, on parlera de t es t u erbfctsi Hi est composit e de la forme 9of7=0n 
parlera de t es t leilat' 

Co mment fa ir e p our cho isir entr e les deuxeh^p atte'tH 2 ? II faudr a partir de ce que Ton p eut 
c 0 nntare du moeHec’es t-'a - derne ga lementerrlna ntillo n 0 be0£ v,' . . . ,X). Po ur celapn definit 
une s ta tistique qui ser ©Idecl/o “ute du test: 

De fini ti 0 rDan s le cadre du peirbfe' de t est (8, soit T un e st at ist iqu e (don c un e fon ct ion mesu rable d'ur 

echantil Ion (%■■■ ,X n ) is su du m etb) 'a valeu rs dan^,IB|ui sera apped st at ist iqu e du teitest 

sera c£fi nipar la fonct ion cp = 1 ll GW , 0 ' u W esrb n e par t ie dfe H^poSe region crit iqu e du t estsfcet 

part ie correprlen t aire dan p se®t appffi^ 'legion d’accept at ion du t est). Si cp = 1, on clioisiinacHi on 

decidera plotiH 0 . 

Do nc, 'a cha que h^epsoetWietH 1 , on a sso c ie une pa r ti£ pl©IRr la sta tistique de test T efffirga I, 
ces pa r ties ne so nt pa&0i. Po ur p ouvoirqDceshe nterter mine r tegrio n W , da ns un caetr eitfiue 
(q uin’est pa s learme que le ca dr e pr atique, vo ir plus ba s), on p eut co mmencer pa r asso cier une fo nctio 
puis sa nee 'a la sta tis tique de te^firpiiailesler r eur s de pr enraeresspet de deame esepce |3: 

De fini ti 0 rP.ou r la st at ist iqu e de t est T , on associe: 

- un e fon ct ion pu issan ce, qu i est la prdbadiritits irh) :9 G0i -> IPe(T/GW). 

- u ne erreu r de premei esepce :Ph 0 (Chois irHi) = a = suplPe(T GW); 

e ea 

- un e erreu r de secon ctecesjP'Hi (Chois irHo) = (3 = suplPe(T/GW). 

e ea 

La pu issan ce du t est es|Bl 

Cep enda nt, ce q ui v ietrt^"cr it r es teothlque. En pr a tique, on utilis ertalpWiifha r che suiva nte: 

Co ns tructi on co nerte d' un test: On supp ose le proirtne de test (8 0n p os eg a lement a pr io ri 
a qui dep end du pr ertale p e$ma is enege r at = 0 .0 5dtl - a est app elfe nive a u du teBd:.r la 
suite, 0 nera lis e: 

1. L’expr essio n qua ntita tive desii^peabtbtH 1 , 

2. Le cho ix de la sta tistique T du test. 

3. La co nstr uctio n d'lHngpb'n cr itique W 'a I'h^psceUpar rapp ort 'a T. 

4. La deter mina tio n explicite de W en fo nctio n de a. 

5. Le ca Icul (s i p os s ible) de la puis sa nce-d|Bi.testl 

6. Po ur la <ea lisa tio n otelh'a ntillo n, r ejet ou a ccepta ti© n deH 
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R em arque : Cep endaentpr a tique on ne fed® <p'a s a in©in a do nc deux typ es d'err eur . Le cho ix de 
I'hy p otote pr ivelope' est do nc fo nda meitoarlle es ulta t d'un test n’est pa seiyriq'uPa r exe mple, 
supp osons que Ton ait p our ertie 0FC, B(IR n ), N (0 , ff ,6 G IR) et q ue I'o n veuille tes terH9 =0 
c o ntr eiH: 0 = 1 'a pa r tir d'eoha ntillo n ^X" ,X n ) du mo d'leNo us ver_ro ns p o uiuqqaH u plus 
lo inX n es t une sta tis tique de test p er tinente. Pa r exemple, sinful) ) = 0.8, que va-t-on 

cho isir entr ©1-fetH i ? Na tur ellement, ub§ ro n cr itique ser a de la fo r wife fcB,ys£ IR, ca rX n est 
un estima teur de@n deter mine s 'a l'a_ide dpuas q ueP 0 (Cho is irN) = a =P o(X i > s), do nc par 
e x_empls,a = 0.0S,= 1.65 ) ar suitesi X i(w ) = 0.8pn a cc e ptetet I’e r r eur de s e c o eateaeassp' 

Pi(X i <s) = 0.74 , do netele ®e : le test n'es t paes tlirscr imina nt. Ma intena nt, si on irtyetrte,H 
s o ithd : 0 = 1 contr etH: 0 =0 , le name e's ulta ) = 0 .8, conduit 'a a ccetptavH c une er r e ur de 
s eco nd esipe e nc © fie. 7 4. On o btient do nc deiuifctats opp®s p o ur lamre e « piencasa to ir e. Les 
hy p odts'esJHetH i ne so nt cla ir ement pa s inter cha ng ea ble. 

La q ues tio n cpeip ose ma intena nt est de savo ir co mment tr o uver une sta tistUpj£ide<fe9s&.- 
tur elle dans ce cadr e petairque ser a it d’utiliser un estima teur du ma ximum de vr a isembla nee. 

4.2 Testde Wald 

Un estima teur du ma ximum de vr aisembla nee p er met d’a sso cier 'ae6haa4Jubebypu®itlahs emble 
de rreme "fo r me" q bi<e®0 1 . Cep enda life, diffic u&est tr o uver la toe I'es tima teur du ma ximum de 
vr a isembla nee 0 'a.r6fixela es t p os sible, on utilis er a dir ectement 0 co mme sta tis tique de test. 

Sino nde ma air e plusege r a lap co nnbfa loi asy mpto tique demand le moedfe e s ferg' ulieDo nc 
qua nd n est gr a nd, on p o ur ra it utiliser une lo i no r ma le co mme a ppr ox i.mvtetis, raid® te iloel de0 
o bsta cle a ppta: itama tr ice de cova r ia nee asympto tique, qui est la ma tr ice d'info r ma tio n de Fisher inv< 
dep end du pa retrre 0 . Aussi va - t-efe'iper utiliser la sta tistique de test T suiva nte: 

De fini ti o rP.ou r un mode paraet'riqu e dorarre g ul i er (O0,A n , IFfe,0 G0), o 'u9= IR P . La st at is- 
t iqu e de Wald T pou r le t est®l=0o con t reH :0 G0i es t :T =n ■ t (0h — 0) ■ I (0)- (0h -0). 

Pour montr er "feto'r iq uement" la p er tinence de cb trasetp nc co nsider la s uite de te SnOsefTse 
plaqant dans le "grand" nateefe'sy mpto tique: 

The oern eD ans le cadre d'u n Bteqbaraietriqu e (($ N ,A| N , (fe ■ dp)® IN ,0 G0), o 'u0= IR P , dom ie' 
par u n e m es u re^getlrer, pou r le peotole de t esfiH:0 =0o con t reH :0 =0o, alors, en n ot arntT 
la st at ist iqu e de t est de Wald poueitdqDnojal'de tail le n sous I'hyiHstbPb, 

T " n ~z x 2 (p )■ 

La region de rejet asympt ot iqu e du t est sera don c denla>fcdfPTe'D$[ est le qu an t ile d’ordfaxL 
de laloi dux 2 (p). La su it e de t esit^Ta don c un e pu issan ce qu i t en d vers 1 lorscpi e a est fi x' 

Pern on st rat: iba lo i asy mpto tiquerdfeftluit la lo i asy mp£o_tiquendelr^ n ■ I (0 f' 2 ■ (0h - 0) suit 
a sympto tiquement unfel (iQi ,b) s o us I'hy peostfebletTn = n ■ I (Qf 12 ■ (0n - 0) 2 . ■ 

Vo icido nc un pr emier typ e de tqsiti,so us cer ta ines co nditio resgtelaasitTu mode et p o ur ce r- 
ta ines hyp e fches de te s ts es fessh'nt. Ma is p o ur ra it- on fa ir e mieux ? Et enesfDietrsffiirBS ?l Do us 
fa ut doncerfinir un moyen de co mpa ra is on entr e deux tes ts. 

4.3 Test du rapp ort de vraisemblance 

De fini ti o rSou s les hypdiies etiot at ionsqaEden t esp dira qu 'u n teiptestu n iforemn'ente plus 
pu issant (U.P.P.) au seualsi le n iveau de cp aseoeila st at ist iqu e T esteinn ifoiegal'a a et si pour 
t ou t au t re t esfeqs oa-fa la st at ist iqideTniveau ierfieu r oiegal'a aV0G0i, 

IEe((p ) =1- IPe(T/GW) < 1 — IPe(T GW ) = Ife(cp ). 
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De fini ti o r£ou s les hypefehes [sceden t es, siU) est la vraisemblance, on appel lera test du rapport de 
vraisemblan ce (t est de N eyman - Person dan s le eassigiiypateif un test de statistique T tel te que 

T= SUftea Le(Xi, ■■■ ,X n ) 
su|% ea Le(Xi, ■■■ ,X n )' 

La region crit iqu e W aseecla un tfeles t es t de la forme W « J-K[ (done si T < K, on rejettehb). 

Une des ver tus du test du rapp ort de vra isemblance par rapp ort au test de WpIdudstrcpuCitiles' 

dans un mcetfe' no reg'ulier (ma is la questio n de sa lo i, ou de la lo i d’une fo nctio nnelle de ce test, demeur e 

De plus, la pr o fte'isuivante confir meifreittde cette s ta tis tique de test: 

Pro priete (Pr incip e de Lehmamfijans le cas du t est de deu x h^sststiimples, ou d'u n t est enaillat' 

(0 <= IR), ce t est est U.P.P. Dan s le cas d'u n t e&rbljatri’ex iste pas fenaen t de t est U .P.P. 

Pern on st ration ■ 

Enfin, un teltest p our un meld'ie'g ulier, va p o u'e<brie / 'tr $itie ma eir eegjer a le gr "a ce 'a la n© r ma lit' 
a sympto tique de I'es tima teur du ma ximum de vr a isembla nee: 

The oern eD ans le cadre d'u n eteqbaraietriqu e ((’$ N ,A| N , (fe -dp)® IN ,9 £0), o 'u0= IR P , dom ie' 
par u n e m es u re^geitlher, pou r le peotole de t es6H:9 =9o con t reH :9 =9o, alors, en n ot arntT 
la st at ist iqu e du rapport de vraisemblan ce pafa ptejertmte' tail le n, 

-2 lo gffi n -^ X 2 (P )■ 

La region de rejet asympt ot iqu e du t est sera don c d^ltofgff^e-Sa, o' us est le qu an t ile d'ordre 
1 - a de la loi du^(p). La su it e de t estMTa don c un e pu issan ce qu i t en d vers 1 lorscpu e a est fi x' 


P e rn on s t ra t:ida demo nstr a tio n r epr end un p eu celle de la efflEyrraflllD' tique du ma x imum de 
v r a is e mbla nee. ■ 
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Un iv e esPct ris I , Pa netxbin - So rbo nne 


P remier e A nee M aster M .A .E.F. 20 05- 20 06 

S tati sti qu esl 

C o n<b ite cont i ridin novemb r e 2 0 05 

Ex amen de 2 h 00. Tou t docu ment ou calcu lat rice est int erdit. 


1. On co nset'e une suiteifXiN de va riablesea to ires epdendantes et identiquement 

dist r iteies suiva nt un&llfrti,a 2 ), o'unGIR eto 2 > 0 sont des pa eiirres inco nnus. 

So iteg a lement p oGiliMf, X n = ~(Xi + ■■■ +X n ) eto 2 = ^ (Xj -X n ) 2 . 

(a ) Po ur n ftxcfe'ter miner le mdefstatistique pa ei rrique. 

(b) Po urnGIN* quelle est la lo iXie? 

(c) Quelles so nt les limites (en prodoetbeliitfo i) deXet dec^ (j ust ifier ...)? 

(d) Mo ntrer que la co nna issa ri£e,de(X_n) induit celle de (&■ --,X n ). Det er- 
miner la lo i du vecteXm(- --.X n ). Les (Xk) so nt- ellesepdenda ntes? 

(e) So ilX n = ^(X i + ■■■ +X n ). Quelle est la IcxHeX n p ournE IN*? En deduire 
queXn rn. Mo ntr eg' a lement queX^^ m. 

(f ) Co mment p eut- on fa ire p o ur savo ir quelle suite de t/a irra^bifesaolu 
(X k )k>i s'a ppro che le plus vite de m ? Co nclusio n? 

(g) Pour le impede pa raetnr ique de t a ille rf estusuppeso nnue, mo ntrer que la 
sta tist iqGtip! est exha ustive coertnpEt la st at ist iqueij(X--,X n )? Enfin, la 
st a tistiqXei est- elle exha ustive? 

2. En f a itpn ne co mrtapa s explicitement cha qweXa is plufo t p o ur tc&iHM:*, 

T k = ma x tX- -,Xk). 

(a ) La co nna issa nceide-(Tn) induit - elle celle de <X-,X n )? 

(b) Determiner la fo nctio neqtei r tit iOkncffeT k , puis,apres avo ir moeifeio n exis- 
tence, sa densfftk'par rapp ort 'a la mesure de Leb esgue, le tout en fonction de la 
f o nctio n dpar'rtitio n F et de la denfeileX i. 

(c) Determiner, en justifiant, le comp ortement asymptotique^qi)aotel(iT)n. 

(d) Po urk E IN* mo ntrer quqJetT k +i ne sont pa s ie^'enda ntfeto ntr er que 

IP (T+i=Tk)= En cfe'duire la mesure de pro teacliillfe'varia WeT-Tk. 

La lo i de pro ba&itife'la va riable^st- elle "continue" ? '®ieCf 

( e) La statistiquelest-elle exhaustive p our l©tei<pal raetrr ique de t a ille ri o 'uo 
est suppesbonnue ? Et la statistique-(T,T n )? 
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Un iv e isfPct ris I , Pa netxbin - So rbo nne 

P remier e A nee M aster M .A .E.F.20 05- 20 06 

S tati sti qu esl 

C o nt) te cont i riQn ja nv i er 2 0 06 

Exam en de 2 h 00 . To ut d ocum en t ou ca Icula trice est in terd it. 


1. Soit la variable X qui suit une lo i do nt ^dqcrasitrapp ort 'a la mesure de Leb esgue 
sur ]0 , 1] est, avec p SKI: 

fx(x)=K-x p p our to ut£]0 , 1], 

( a ) ©terminer K en fo nctio n derp,pecisa nt quelle co nditio n eloifte/'pEn 
deduire IE (X ) et var(X ), eecpsa n4g a lement des co nditio ns sur p. 

(b) On supp ose que la suiitfe finest co nst&e 'de va riablesctdlresepdenda ntes 
et identiquement distere&siuiva nt lame lo i que X . Soifectma' ntillo n o teserv' 

(Xi, . . . ,X). On desire estimer p 'a pa rtir dedefc'nt i McQraiel est le moedle 
statistique ? Montrer que ceetoaqb'partient 'a la famille exp onentielle. 

(c) En deduire qu'il n'existe pa s d'estima teur sa ns bia is effica ce de p. 

( d) Mo ntr er que qdeg (X ) suit une lo i connue do nfeoisqcna' le pa retime. En 

deduir e q(te= -1-n ■ lo g (# 1 est un estima teur sa ns bia is de p (utiliser 

i =i 

les lo is ga mma s...), puis qu'il est de va ria racraantifeiirrimale pa rmi les es- 
tima teurs sa ns bia is (Lehma n©.-.$cheff' 

2. So it Y une va ria ble suiva nt une lo i de Berno uliitateB^Ora Ifiet agenda nte 
de X. On definit une variable Z de la neaensuiva ntei Y = 1, a lo rs Z = X , et si 
Y = 0 a lo rs Z-X. 

(a) Montrer que Z suit une loi absolument continue par rapp ort 'a la mesure de Leb es 
sur[-l , (OtIO , 1] et que sa defigitest: 

fz(z ) = (P + lDx| p p- Nxe]o,riMl - p)- Mxs[-i,o[ p our to ut£[-l , (EDD0 , 1]. 

Calculer IE (Z ) et var(Z ) (ecipa'nt les co nditio ns sur p ). 

(b) On supp ose que la suifygEi^st co nst&e cle va riabl®sad;d)'ires©iDdenda ntes 
et ident iquement disfeestmnva nt lanrre loi que Z . So ifedro' ntillo n o teserv' 

(Zi, ... ,2). On ofesire estimer (p , p) 'a pa rtiedbamitllon. Quel est le eh© d' 
statistique ? Montrer que ceatoaqb'partient 'a la famille exp onentielle. 

(c) En deduire une statistique exha ustive minima mpl'ce mdeiDet er- 
miner la matrice d'information de Fisher oWeripLds la b o r ne de Cr a mer- Ra o. 
Determiner une fo nctio n g de (P , p) que I'o n p eut estimer sa ns teiiaeis et de ma r 
effica ce. 
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(d) Det er minaipies avo ir moenfeio' n uniotf'estima t euF,^) du ma ximum de 
vra isembla nee de (Pbepjestima t eu^s(atp n so nt- ils iepl endants IfeDer- 
miner un tboeme de la limit e cent rarl&avpa r (iPp n ). Est- ce un estima teur 
a symptotiquement effica ce? 

(e) Deter miner unsgrio n de co nfia nee de nivea u 95 % sur (P , p), en utilisa nt 1/ I'est 
ma teur effica ce de g (P , p) 2/ I'estima teur de ma ximum de vra isembla nee da n 
ca dre a symptotique. 
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Un iv e isPct ris I , Pa netxbin - So rbo nne 

P remier e A nee M aster M .A .E.F.20 05- 20 06 

S tati sti qu esl 

E xa m en t er mi na I, ja nvi er 20 06 

Exam en de 3 h 00 . To ut d ocum en t ou ca Icula trice est in terd it. 


1. On co nstef'e (X)k&Net (X k ) k gin deux suit es iepJ 'endantes de variables £16 ir es 
definies sur leenie espa ce de pro tea brilfip endantes et identiquement cbsts-ibu 
suivant les lois resp ecftii^ascO (p our les$ etN (p,o 2 ) (p our les$, o'u (p )|jE 
IR 2 eta 2 >0. Le but du pr oetoih'e est de t est $r=^ii 'a pa rtir d'aiaha ntillo n de 
cha cune de ces suites. 


So it (X, . . . ,X) et (X lf . . . ,X), o'un G IN* etn' G IN* deuxecha ntillo ns issus 

de (Xk)keiNet (X k ) ke iN On p ose Z = {Z ■ ■ ,Z +n ) = (Xi X,X x X) 

( a ) ©terminer le mdefstatistique assa'eZ =(Z ■ ■ ■ ,Z+ n ). 

(b) Montrer que ce rroiedest exp onentiel.&tuct'e que p efteuvenfet re esttea' 
effica cement (o n no tera |Leetp estimateurs resp ectifs). 

(c) Mo ntrer qu'un estima teur du ma ximum de vra isemfotetra^eadjeai:: 


o 2 


1 

n +n' 


Zj -P 



Est- ce un estima teurtedadi^? Est- il co nvergent ? Effica ce? 

( d) Lo rsque n ebont "g ra nde'dudr e de ce qieicpiie, des interva lies de co nfia nee 
'a 95 % p our p etp 
(e) So it le prcetrlie de test: 


Ho : p=p co ntre Hi : p=p 

(a 2 resta nt inco nnu^Mbntrer que la statistique T du rapp ort de vraisemblance 
ver ifie: 



En dsduir e que ^rion d'a cceptatio n du te£cpii®u£cs'us la fo riiaeb -a 2 , 
avec K tep endant du niveau du test. 
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(f ) Po ursterminer la va leur K en fo nctio n du ffiareknifest, on p eut coensid' 
la statistique, dit e de F isher, 

Y _ (n +n ) • o 2 - (n +n ) • o 2 
n +n 2 
n +n -2 ° 

i. So it les vecteurs d^lRu i = (1, . . . , 1 ), u = (1, . . . , 1 , 0 , . . . , 0) (so it n foisl 
etn fo is 0) etu=ui - u . Mo ntr er que u stount ort ho gonaux. 

ii. Sous I'hyp o4feeH 0 , determiner une expressio n plus simpfe^eZ ), pr o- 
jete o rtho go dalZ sur le sous- espace vectfaielv.) eng eradpa ru, et 
P< u ,o>( Z ), pr oej etrthogo na I de Z sur le s.e.v. engaendretu 

iii. Montrer que sous I'hypestfHo, le vect eur Z p eiefcsi'r e Z =pui +o ■ £, 

o 'u £ est un vecteeiatajlife gaussien conepctesn + n varia bles ga ussiennes 
centoeseduit es. 

iv. Montrer que sous I'hypaSbfeHo, (n +n ) ■ o 2 =o 2 ■ Pa(£) 2 , o'u . est la 
norme euclidienne cla ssique Stif 1 IRt A est uns.e.v.de IFC +n que vo us 
pneciser ez. 

v. En utilisa nt le Jbefne de Pythagore, montrer que sous lfels§!|3b(fetlhavec 
B ests.e.v. defFf" que vo usepnrser ez, (n H^?-(n +n)-o 2 =o 2 - P B (£) 2 . 

vi. En utilisa nt le Ibffme de Co chran, montrer que sous Ids^tbtoTh'suit 
une loide Fisher 'a (1 , (n +a 2)) degers de lib eetLo rsque n etn so nt 
"g ra nds", quelle lo i suit a pproxima titfementT 

vii. Po ur finir,eterminer K en fo nctio n d'un qua ntile de la lo iad£LF, i^rhver' 
n - 2 )) degs-de lib ert' 

2. Soit X une va riableaatjo ire do nt la mesure de pnetoEtlaillte'o lument co ntinue par 
rapp ort 'a la mesure de Leb esgue sur IR etede densit' 

f (x)= ^ exp(- A|x - m|) pourxGlR, 

avecmGIR et A > 0, des pa BEtme's inco nnus. 

(a ) Ca Iculer I’esp nee et la va ria nee de X. 

(b) Calculer IP (X = m) et IP (X < m). Enddnr e laeidia ne (fetor ique) de la lo i de 
X. 

(c) So it une suite iOXein de va riablessa to ires eiodendantes et identiquement dis- 
t ribees suiva nt tanre'lo i que X , do nt on exlffehife imrbitlo n o tes^fiy'. . . ,Xn +j). 

Pa r a illeurG,n no te& < X (2) < ... < X (2n + i)la statistique d'ordre ass@.cr 
So it: 

n 2n +1 

Hn( a) = 2n+l l Xi_a l P° uraeiR - 

Ca lculerH(X ( n + en fo nctio n de®X Mo ntrer que la fo nctio-ndH n (a) est 
minima le en& + i>( o n p o ureveebb'pp eFfX(n +k>) en fo nctio n de^p our 
k > 1). 
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(d) On supp ose ique m= l,do nc que m est co nnu (A > 0 resta nt inoQirelu). 
est alors le moed^ statistique ? Montrer que ce lele d'ppa rtiemtfa fa mille 

exp onentielle, et edidfe une statistique exha ustive do nt vo us mo ntrerez qu'elle 
est co nqile. ©erminer la matrice d'information de Fisheieteu Qxoede est la 
f o nctio n de A ('a une tra nsforma ties) qifSrltopr'p eut estimer effica cement? 
Determiner I'estima teur de ma ximum de vra isembla nee de A eterriifieitrer qu'il v' 
un theoeme de la limite cent ra le. 

(e) On supp oseedorma is quenG IR est inco nnitput co mme A > OQuelest 
alors le moe<tb statistique ? Montrer que ceateondappartient pa fea fa mille 
exp o nent i^lda ide de la questio n 2d$t&rminer un estima teur, A ft) du 
ma ximum de vra isembla nee du co uple (m, A). 

(f ) Po uraGIR , dmo ntr er quefld) co nverge presque s "urement epu>® nxzters 
IE(|X - a|). Mo ntrer que la fo ncti<GiliRi-> IE(|X - a|) est minima le en a = m. 

En deduir e queun m,puisqueA n A. 
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Un iv e lesfPct ris I , Pa netxbin - So rbo nne 


P remier e A nee M aster M .A .E.F.20 05- 20 06 

S tati sti qu esl 

E xa m en de sept embr e 20 06 

Exam en de 3 h 00 . To ut d ocum en t ou ca Icula trice est in terd it. 


1. On co nseof'e (i$k eiNune suite de va ria btesta ires epdendantes et identiquement 
dist r iteies suiva nt la N>i( m, l)o'umG IR. So it la suite de va ria blids^iKtelle 
que p our to uffclN* 

Y k =X i H — +X k . 

So it (Y, . . . o 'ui€IN*unecha ntillo n issus dfec^fN 
( a ) ©terminer la lo i cte^ ourkGIN*. 

(b) Determiner la ladlu vect eur {y. . . Mo ntrer que p o im j, Yi n’est pas 
indep endante djeY 

(c) Determiner le mdefstatistique assTelaY- ■ ■ 

(d) Montrer que ce mdeJ'est exp onentiel. 

(e) So itjn la ma trice de cova r ianc@,de (Ytf. Ver ifier que 


u 2 

-1 

0 

0 - 

0 

o u 

i -1 

2 

-1 

0 - 

0 

°E 

1 o 

-1 

2 

—1 ■■■ 

0 

0 = 

0 

0 

0 

0 - 

-1 

1 


En deduir e que m p etrte est ierpa r un estima t eur m ( quediDSierprfsa ns 
bia is et efficace. 

( f ) ©terminer I'estima teur du ma ximum de vra isembla nee de m. Est- ce un estima 
bia is? Est- il co nverg ent ? Effica ce ? Quel est so n risque qua dratique? 

( g ) ©terminer la statistique du test de rapp ort de vraisemblance p our le test 
Ho : m=m 0 co ntre Hi : m=m 0 , 

o'umest une co nsta nte co nnuealiOe one a pplicatio lenLqrie de ce test au 
nivea u 5 % p o ur n = 1 0 0. On tro uveoefu&.rAceerpte-t-on alors I'hvqseth' 

Ho? 

2. Soit X une va riableatio ire do nt la mesure de pr©fe^;laillct 50 lument co ntinue par 
rapp ort 'a la mesure de Leb esgue sur IR etede densit' 

f (x) =k ■ llo< x <e p ourxGlR, 

aveckGIR et 0 > 0, des pa eirnas inco nnus. 
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( a ) ©terminer I'expressio n de k en fo nctioCradeiBer I'espa nee et la va ria nee 
de X. 

(b) So it une suite iOXein de va riablessa to ires eiodendantes et identiquement dis- 
t ribees suiva nt tanre'lo i que X , do nt on exlffehifc unbit I o n o las^fo/'. . . ,X). 

Pa r a illeurs,n no te& ^ X (2 ) < ... < X (n ) la statistique d'ordre asee.Qn 
desire estimer 0 'a pa rtir (X . ,X). Quelest alors le meld'st at ist ique ? Q uel 
est la vra isembla ncdik mode? 

(c) Mo ntrer queT=X < n ) = ma x(X . . . ,X) est une statistique exha ustive p o ur ce 
mo dfe. 

(d) Mo ntrer que cette statistique est minima le. 

(e) So it (k . . ■ ,iX G IR n et lememe n- uplet ordenmm =x d> < ■■ ■< X( n > = 
ma x($. Mo ntrer que: 

IP (Xd ^ X(d, . . . .X,) < x (n ) ) = n HP (Xl < X(i>nXi < X 2 < x (2) n- ■ -iXn -i< X n < x (n )). 

Mo ntrer pa efla'tio n sur leerdees pa rtielles que: 

- - - IP (Xl ^ X(i)nXi < X 2 < X( 2 ) n ■ ■ -rX n -1^ X n ^ x< n )) = f(x (i> ). 

ax ( i).. . dXn) i= i 

So itLi n) la vra isembla nee c (§,(X. . ,Xo). Deduir e de ce que<pde que: 

Le n) (x ( i) (Xj) = n!- L e (xi ,X- 

( f ) ©ter miner la dee^itils le bia is d,eT 

(g ) Mo ntrer que"§st une statistique exha ustive etetoempl' 

(h) Deduir e de ce cpiiece'de un estima t eyide 0,sa ns bia is et unifemrent de 
va ria nee minimale. 

(i) Ca leuler le risque qua dratiqup die^ndeduir e qu$T 0, puis, que p our 

t o utcE[0 , 1 [ ,°hT n - 0) 0. 

( j ) ©terminer explicitement un interva lie de co nfia nee 'a 95 % de 0 p.n fo nctio n de 
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Un iv e esPct ris I , Pa netxbin - So rbo nne 


P remier e A nee M aster M .A .E.F. 20 06 20 07 

S tati sti qu esl 

C o n<b ite cont i ridin novemb r e 2 0 06 

Exam en de 2 h 00 . To ut d ocum en t ou ca Icula trice est in terd it. 


1. On co nset'e une suit di&N de va riablessa to ires eiodendantes et identiquement 
dist r iteies suiva nt une IKb(0 ,d), o' ud > 0 est un pa raetne inco nnBo ur to ut 
n GIN* on obTinit: 

Xn =£n -a£n-l, 


o'uaGIR est inco nnu. On no tera pa r la suitd,QxN (a 
(a ) Mo ntrer que v^)r4e 2d. 

(b) Po ur to utGIN* determiner IE iOXat va r($. Mo ntr er queXX^st une suit e de 
va r ia bles identiquement teeferdbirit vo usqrarerez la lo i. 

(c) Montrer que covi(Xj) = (1 +a 2 )o 2 si i = j , cov (XXj)= -ao 2 si |i -j | =1 
et cov (XX j ) = 0 sino n. 

(d) Po ur n fig,'en cfe'duire la lotiu vect eur Q(. . . ,X), puis ob'terminer le meld' 
statistique pa retnhque ass®en piecisa nt une mesure do mina nte. 


(e) So it<3 = ^ 


X 2 . Mo ntr er qu£@st un estima teur no nebded§/So it 


1 [n 12] 

z^ = - x 2 2 

n k =1 


Z {2) = - 

n n 


[ (n + l)/2] 

X|k -1 

k =1 


avec [x] la pa rtiesietide x. Mo ntrer que les suites de va r$)blefe ((^ 2) ) n 
co nverg ent presque s ''uromoieet (purs limit es) et qu tel life rat' undMme 
de la limit e centra le. 


(f ) Mo ntrer que si deux suites de va ria bles co nvergent presque s "urement, la suite 
p ose de leurs so mmes co nverge presque s ''uredaenfe <pie#g co nverge 
pr esque s ''urement^/erso 

1 n-l 

(g ) So itp= — — - X iXi+i. En utilisa nt leenne typ e d'argument qee0em- 

n — 1 1 =1 

ment,mo ntr er quedip co nverge presque s ''urementav^rSn deduir e un 
estima teur de a co nverg ea nt presque s "urement. 


2. So it X une varia btetolre dont la loi est absolument continue paaleepiDeodr'e 
de Leb esgue sur IR et telle que saedsarrshapp ort 'a cette mesure soit: 

fa,,(x) =K i^ll-a S x„ 
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avecaGIR eta GIR. So it (X, . . . ,X) unecha ntillo n de n v.a .i.i.d.eateentD i que 

X. 

( a ) Apes avo ir pdser I'ensemble des valeurs 0 pour 0 = (eleftfer miner K en 
f o nctio n de a et a. 

(b) Calculer IE (X ) a^avo iievifier que ce ca Icul peters 'effe<dt|Dibur0E0. 

(c) Quel est le meld'statistique assaa'aUX ■ ■ ■ ,X). 

(d) Mo ntrer que S =fXi|, . . .|X n |) est une statistique exha ustive. Mo ntrer que p o ur 
n > 3 cette statistique n'est pa s minima le. 

(e) Deter miner une statist ique T/PaXTa va leurs da nsx[^ qtii so it exha ustive 
minima le p o ur toGitM. 
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Un iv e isfPct ris I , Pa netxbin - So rbo nne 

P remier e A nee M aster M .A .E.F.20 06 20 07 

S tati sti qu esl 

C o nib ife cont i riQn ja nv i er 2 0 07 

Exam en de 2 h 00 . To ut d ocum en t ou ca Icula trice est in terd it. 


1. Soit X une varia bloea to ire suiva nt la lo i suiva nte: 


IP(X = 1) = IP (Y=— 1 ) =pet IP (X = 0) =1— 2p, 


o 'u p est un paefem®ef inco nnu. 

( a ) ©terminer I'ensemble des valeurs p ossibles p our p. Calculer EX et varX. 

(b) On supp ose que la suite; IXin est co nstifee'de va riablessa to ires Eplen- 
da ntes et identiquement dis£esb$jiiva nt laerrfe loique X. So it unecha n- 
tillo n (X, . . . ,X). Determiner le meld'statistique ass©acicetecha ntillo n et 
determiner une mesure dominant celmMdntrer que le meld'a ppa rtient' 
la famille exp onentieBe.deduire une statistique exha ustive eberpob ur ce 

mo dfe.Mo ntr er que p pdtad'est ieneffica cement et do nner un tel estima teur. 
Ca Iculer la b orne de Cra mer- femtatcvu'elle est bien a tteinte pa r cet estima- 
t eur. 

(c) O n dfinit la suit eil&liN* 'a pa rtir deiUXiN de la maeirie suiva nte: 

Y+i =X i ■ X i+ i pouriGIN. 

Determiner la lo i deMontrer que cov,W+i) = 0. Les (Y so nt- ellesepden- 
da nt es? 

( d) Mo ntr er qi|¥{|, . . .[Y n |) est une statistique exhaustive p our leleietcb' t is- 
tique induit pa ri(Y--,Y n ). 

2. Soit la variable X qui suit une lo i do nt ^d^rasitrapp ort 'a la mesure de Leb esgue 
sur IR est , avec 0 > 0 et a > 0: 

fx(x) =K ■x a llo<x<e p our to utGIR, 

( a ) ©terminer K en fo nctio n de a et 0. 

(b) Montrer que Y = log (0 /X ) suit une loi exp onentielleedcHdrerteppa e& re'. 

(c) On supp ose que la suite; IX in est co nstite'de va riablessa to ires i$Tpd en- 
da ntes et identiquement diebsibuiva nt lame lo i que X . Soiteiaha nt illon 
(Xi, . . . ,X). On supp ose que (0 , a) est inccRireaiser alors le moldst a tis- 
tique f o e pa r ceichantillon et la mesure dominante. GeleinBD|3i|3a rtieni- il' 
la famille exp onentielle? 
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(d) Dans cette question, et uniquement dans cette question, on supp ose que 0 est cor 
Preciser alors le msJodst at ist icpemode a ppa rtieni-ia famille exp onen- 

tielle ? Mo ntrer que I'estima teur du ma ximum de vra i^dimblffixii6feeaest 
unique etefcr it: ^ 

K= i ",ilo g (0 /K - 1 

Mo ntr er que converge presque s "urement vers Geetf^tiih^'dneme de la 
limite centra le que I'oeniper £.n deduire un interva lie de co nfis06c%' sur 
a p our n gr and. 

(e) D a ns cette quest0Det,a so nt inconniEfcaterminer une statistique exha ustive 
p our le meld' En vo us a ida nt de la ques±©ctep1reetleYminer I'estima t eur 
du ma ximum de vra isemblai,racd d& (0 , a) effermiiper la fo nctio ne0a r- 

t itio n de lo gnOOe'Ben dduir e que0 n - P -^ 0, puis que n lo g (0,y0- P -^ 0. 

(f ) So it (Mn gin et (V n )n gin deux suites de va ria btea bDlfresloHies sur le enrie 
espa ce de pro babNIb'ntr er que si^Uco nverge vers une JjoelPCVdn co n- 
verge en pro barters 0, a lo rs-flV n )n co nverge en lo i vefsFh p o urra par 
exemple ma jorer laediffce de fo nctio ns eaisrfeiqtues) . feddfr e quecsuit 
le meme tboeme de la limit e centra lerique ~a 
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Un iv e esPct ris I , Pa netxbin - So rbo nne 


P remier e A nee M aster M .A .E.F. 20 06- 20 07 

S tati sti qu esl 

Exa menter mi na I, ja nvi er 20 07 

Exam en de 3 h 00 . To ut d ocum en t ou ca Icula trice est in terd it. 


1. On co nsetfe une suite de va ria biesta lresk(K<EiNdefinies sur leeme espa ce de 

pr o ba belithcip endantes et identiquement cfeelri&Djjva nt une lo i de Berno ulli de 

pa raeti r e p. Oefidiit: 

Y= min {kGIN*, X k =0}. 

(a ) Co mment p eut- on ieterfia'va ria ble Y ? Mo ntrer que la lo i de Y est: 

IP (y = k ) =fr\l— P) p ourk GIN*. 

(b) On supp ose que (Y . est uiecha ntillo n de va riaetoliB sr&sepdenda n t e s 
et ident iquement disteebisuiva nt la fcbaY avecp €]0 , Mst inco nnD.et er- 
miner le moe<tb statistique et sa mesure do minMantboer que ce meld'est 
exp onentiel. Eediilre, un estima t eisr^)p sans bia is et efficaeterdniner la 
b orne de Cramer-Rao etifrer que cette b o r ne est bien a tteinte pa rp 

(c) La va ria ble Y est troeBc|a 'rsqu'elle est trap "gra nde", pa r einrpICfiltft' 
c'esta-'dire que I’oefidit une va riablieYelle queY = min (Y , T ). 

2. Soit X une va riableatio ire do nt la mesure de pr©fe^;laillct50 lument co ntinue par 

rapp ort 'a la mesure de Leb esgue sur IR etede densit' 

f (x)= ^ exp(-A|x-m|) pourxGlR, 

avecmGIR et A > 0, des pa BEtme's inco nnus. 

(a ) Ca Iculer I’espnce et la va ria nee de X. 

(b) Ca Iculer P (X = m) et P (X < m). EBotLlr e la ©alia ne (fetor ique) de la lo i de 
X. 

(c) So it une suite iOXein de va riablessa to ires epdendantes et identiquement dis- 
t ribees suiva nt tanre'lo i que X , do nt on exlffahife unbit I o n o tes^fiy'. . . ,Xn +}. 

Pa r a illeur©,n no te& ^ X (2) < ... < X (2n + i>la statistique d'ordre ase®.ci' 

So it: 

-i 2n +1 

Hn(a)= Tn+1 |Xi “ a| P° uraGIR - 

Ca lculerM(X(n + en fo nctio n de®XMo ntrer que la fo nctio-ndH n (a) est 
minima le en$ + 1 >( o n p o ureveebb'pp erH<(n +k>) en fo nctio n de^p our 
k > 1). 
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(d) On supp ose ique m= l,do nc que m est co nnu (A > 0 resta nt inoQirelu). 
est alors le moed^ statistique ? Montrer que ce lele d'ppa rtiemtfa fa mille 

exp onentielle, et edidfe une statistique exha ustive do nt vo us mo ntrerez qu'elle 
est co nqile. ©erminer la matrice d'information de Fisheieteu Qxoede est la 
f o nctio n de A ('a une tra nsforma ties) qifSrltopr'p eut estimer effica cement? 
Determiner I'estima teur de ma ximum de vra isembla nee de A eterriifieitrer qu'il v' 
un theoeme de la limite cent ra le. 

(e) On supp oseedorma is quenG IR est inco nnitput co mme A > OQuelest 
alors le moe<tb statistique ? Montrer que ceateondappartient pa fea fa mille 
exp o nent i^lda ide de la questio n 2d$t&rminer un estima teur, A ft) du 
ma ximum de vra isembla nee du co uple (m, A). 

(f ) Po uraGIR , dmo ntr er quefld) co nverge presque s "urement epu>® nxzters 
IE(|X - a|). Mo ntrer que la fo ncti<GiliRi-> IE(|X - a|) est minima le en a = m. 

En deduir e queun m,puisqueA n A. 



52 


Un iv e esPct ris I , Pa netxbin - So rbo nne 


P remier e A nee M aster M .A .E.F.20 06 20 07 

S tati sti qu esl 

E xa m en de sept embr e 20 07 

Exam en de 3 h 00 . To ut d ocum en t ou ca Icula trice est in terd it. 


1. So it la fo ncticbtxf)= ^ (a - a 2 ■ x) ■ ll{- i/ a < x <i/a>o'u a > 0. 

( a ) ©rino ntr er qtiefet unedeneitde pro ba bilitefr rapp ort 'a la mesure de Leb esgue 
et la tr a cer. 

(b) On supp ose que X est une varied to ate de dsflsitDeterminer IEX et varX. 

(c) So it QOk era une suite de va ria b les to I ires epdenda nttelje que la densit' 
deX n so itf n p our to utiCIN*. Determiner la limite en pro badtelitXkjkeira 

lo rsquemoo . 

(d) So it (X, . . . ,X) un necha ntillo n de v.a .i.i.deoteiilienEita. On supp ose que 
a est inco nnDeterminer I'estima teur du ma ximum de vra ise^rfblouincaea 

Ca Iculer la fo nctio lepterrtitio n che 0 t enofe'duire sa co nverg ence en pr© ba bilit' 
ver s a. 

(e) Po ur a > 0,ederminer un interva lie de co nfia nee de-mo/paoul a. 

( f ) ©terminer le test du rapp ort de vraisemblance de niveau a p our tester I'hyp oth' 
Ho : a=a o, contre I'hyp : a=a o et cfeterminer la zo ne d'a cceptation 

du test en fo nctio n de a. 

(g ) Prop o ser un a utre estima teur co nverg ent de a. 

2. Une co mpa g nie fa brique des pileseefesSmt'a savo ir quelle est leeedtervie 
moyenne TPo ur ce fa ir©, n co nsefe' 10 00 piles pro duit eseteienjour que I'on 

so umet 'a lamne a ct i&iCo mme on ne veut pa s attendre que to utes les piles so ient 
usees, on ©tide d'aertier l'e«pience au b o ut de 10 jo urs et de co mpter co mbien so nt 
enco re "en vie". SottNe no mbre. 

(a ) D a ns une pisanmapproximation, on supp ose queel© dteiivie d'une pile peut 
etre moetisee par une loi exp onentielle detprarjgim'O. Q uelle est a lo rsela dur' 
de vie moyenne ^bhrique) T d'une pile en fo nctio n de (3 ? Q uelle est, en fo nction 
de T , la pro ba feitjtf'une pile meure ava nt 10 jo urs ? Mo ntrer aofaliSOifflieN 
suit a pproxima tivement ueottime de la limite centra le do nt ©raiper a les 
pa ra etr es en fo nctio n dEnTdeduire a lo rs un estima teur T de T en fo nction 
deNic/1 00 0 do nt on do nneraeaHrrhte 'de la limite cent ra le. 

(b) Mo ntrer quefd n'est pa s une statistique exha ustive p o iffthe pFapiSEimna p- 

p ort 'aetlia ntillo n des 10 @@sdde'vie des piles. Et si I'o n ava it attendu x jo urs 
a u lieu de 10 -bBerminer a lo rs ©qeiat io teiviSe pa r x tajue T est ime "le 
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mieux" T ( do nc tro uver xubffiFT so it de va ria nee mininff® lie^ultat vo us 
semble t- il en pr a tiqeeesfea nt? 



